{
 "cells": [
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "### 51job职位基于线程池实现异步爬取\n",
    "输入职位关键字（必选），以及工作年限（可选），公司x质（可选），公司规模（可选）可返回51job该岗位的所有招聘信息，以及公司详情、员工福利、集体要求等，如不需所有信息，可将int(total_page_num)+1修改成想要爬取的页数总数。"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 1,
   "metadata": {},
   "outputs": [],
   "source": [
    "import requests\n",
    "from lxml import etree\n",
    "from urllib import parse\n",
    "import asyncio\n",
    "import copy\n",
    "import aiohttp\n",
    "from concurrent.futures import ThreadPoolExecutor\n",
    "import nest_asyncio"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 2,
   "metadata": {},
   "outputs": [],
   "source": [
    "works = ThreadPoolExecutor(10)\n",
    "\n",
    "headers = {\n",
    "    \"User-Agent\": \"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/89.0.4389.82 Safari/537.36\",\n",
    "    'Cookie': 'guid=94e8e34cabf57f2f2318fdb2c9a13869; _ujz=MTkwMDEyNDc4MA%3D%3D; ps=needv%3D0; slife=lowbrowser%3Dnot%26%7C%26lastlogindate%3D20210429%26%7C%26securetime%3DVWlUYVI1Uj9VMQ80W2QLZlFnBTM%253D; track=registertype%3D1; 51job=cuid%3D190012478%26%7C%26cusername%3D0siZgP8OPiW69K7brQ%252BxIxZYZg2o4mQk5QuEmDucHQY%253D%26%7C%26cpassword%3D%26%7C%26cname%3D1fKZ26SXRb8tkm58nNWZ9A%253D%253D%26%7C%26cemail%3DE6uv8x11VA684PgbTP5G3xG%252BQcNiGOWbcA5Jppp8wUE%253D%26%7C%26cemailstatus%3D0%26%7C%26cnickname%3D%26%7C%26ccry%3D.0CXHr9ikSGF.%26%7C%26cconfirmkey%3D%25241%2524zm9yk0Y4%25244a7g8GXIRdTl2ZSQMi7TZ.%26%7C%26cautologin%3D0%26%7C%26cenglish%3D0%26%7C%26sex%3D0%26%7C%26cnamekey%3D%25241%2524oGKUuPm7%2524tW9UvIO7xobvq.26XNAdD0%26%7C%26to%3D993a606209af58a67efa1e0f45ba43f36089f7fb%26%7C%26; nsearch=jobarea%3D%26%7C%26ord_field%3D%26%7C%26recentSearch0%3D%26%7C%26recentSearch1%3D%26%7C%26recentSearch2%3D%26%7C%26recentSearch3%3D%26%7C%26recentSearch4%3D%26%7C%26collapse_expansion%3D; search=jobarea%7E%60020000%2C030200%2C070200%2C080200%7C%21ord_field%7E%600%7C%21recentSearch0%7E%60020000%2C030200%2C070200%2C080200%A1%FB%A1%FA000000%A1%FB%A1%FA0000%A1%FB%A1%FA32%A1%FB%A1%FA99%A1%FB%A1%FA%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA9%A1%FB%A1%FA99%A1%FB%A1%FA%A1%FB%A1%FA0%A1%FB%A1%FAjava%A1%FB%A1%FA2%A1%FB%A1%FA1%7C%21recentSearch1%7E%60030200%A1%FB%A1%FA000000%A1%FB%A1%FA0000%A1%FB%A1%FA32%A1%FB%A1%FA99%A1%FB%A1%FA%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA9%A1%FB%A1%FA99%A1%FB%A1%FA%A1%FB%A1%FA0%A1%FB%A1%FAjava%A1%FB%A1%FA2%A1%FB%A1%FA1%7C%21recentSearch2%7E%60030200%A1%FB%A1%FA000000%A1%FB%A1%FA0000%A1%FB%A1%FA32%A1%FB%A1%FA99%A1%FB%A1%FA%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA9%A1%FB%A1%FA99%A1%FB%A1%FA%A1%FB%A1%FA0%A1%FB%A1%FA%BF%AA%B7%A2%B9%A4%B3%CC%CA%A6%A1%FB%A1%FA2%A1%FB%A1%FA1%7C%21recentSearch3%7E%60030200%A1%FB%A1%FA000000%A1%FB%A1%FA0000%A1%FB%A1%FA32%A1%FB%A1%FA99%A1%FB%A1%FA%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA9%A1%FB%A1%FA99%A1%FB%A1%FA%A1%FB%A1%FA0%A1%FB%A1%FApython%A1%FB%A1%FA2%A1%FB%A1%FA1%7C%21recentSearch4%7E%60030200%A1%FB%A1%FA000000%A1%FB%A1%FA0000%A1%FB%A1%FA32%A1%FB%A1%FA99%A1%FB%A1%FA%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA99%A1%FB%A1%FA9%A1%FB%A1%FA99%A1%FB%A1%FA%A1%FB%A1%FA0%A1%FB%A1%FA%A1%FB%A1%FA2%A1%FB%A1%FA1%7C%21collapse_expansion%7E%601%7C%21',\n",
    "    'Accept': 'application/json, text/javascript, */*; q=0.01'\n",
    "}\n",
    "detail_headers = copy.deepcopy(headers)\n",
    "detail_headers[\n",
    "    'Accept'] = 'text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9'"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 3,
   "metadata": {},
   "outputs": [],
   "source": [
    "#把参数生成器封装成函数，可供选择的参数有：工作年限，公司性质，公司规模\n",
    "def get_url(workyear, cottype, companysize):\n",
    "    workyear = search_workyear_dict[workyear]\n",
    "    cottype = search_cottype_dict[cottype]\n",
    "    companysize = search_companysize_dict[companysize]\n",
    "    return workyear, cottype, companysize"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 4,
   "metadata": {},
   "outputs": [],
   "source": [
    "# 把爬取到的信息储存到csv文件中，文件以搜索的关键词为文件名\n",
    "def to_csv(save_str):\n",
    "    with open(f\"./{user_input}.csv\", \"a+\", encoding='utf-8-sig') as fp:\n",
    "        fp.write(save_str)\n",
    "        print(save_str)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 5,
   "metadata": {},
   "outputs": [],
   "source": [
    "#获取详情页面信息，包括职位信息和公司信息\n",
    "def get_detail(job_href, save_str):\n",
    "    print(save_str)\n",
    "    detail = requests.get(job_href, headers=detail_headers)\n",
    "    detail.encoding = 'gbk'\n",
    "    soup = etree.HTML(detail.text)\n",
    "    job_info = \"\".join(soup.xpath('//div[@class=\"bmsg job_msg inbox\"]/p/text()')).replace(r\"\\xa\", \"\").replace(\"\\n\",\n",
    "                                                                                                              \"\").strip()  # 职位信息    \n",
    "    job_yaoqiu = \"\".join(soup.xpath('//div[@class=\"bmsg job_msg inbox\"]/div[3]//text()')).replace(r\"\\xa\", \"\").replace(\n",
    "        \"\\n\", \"\").strip()  # 职位要求\n",
    "    company_info = \"\".join(soup.xpath('//div[@class=\"tmsg inbox\"]//text()')).replace(r\"\\xa\", \"\").replace(\"\\n\",\n",
    "                                                                                                         \"\").strip()  # 公司信息\n",
    "    save_str = save_str + \",\" + job_info + \",\" + company_info + \",\" + job_yaoqiu + \"\\n\"\n",
    "    to_csv(save_str)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 6,
   "metadata": {},
   "outputs": [],
   "source": [
    "#通过submit函数提交执行的函数到线程池中，submit函数立即返回\n",
    "def callback(task):\n",
    "    tu_data = task.result()\n",
    "    for data in tu_data:\n",
    "        save_str, job_href = data[0], data[1]\n",
    "        works.submit(get_detail, job_href, save_str)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 7,
   "metadata": {},
   "outputs": [],
   "source": [
    "# 爬取职位信息\n",
    "async def get_data(url):\n",
    "    tu_data = []\n",
    "    async with aiohttp.ClientSession(headers=headers) as session:\n",
    "        async with await session.get(url=url) as response:\n",
    "            json_response = await response.json(content_type='text/html', encoding='gbk')\n",
    "            for json_data in json_response['engine_search_result']:\n",
    "                company_name = json_data['company_name']\n",
    "                company_text = json_data['companytype_text'] + \" | \" + json_data['companysize_text']  # 公司名字下面的描述\n",
    "                companyind_text = json_data['companyind_text']  # 所属类别\n",
    "                job_name = json_data['job_name']\n",
    "                jobid = json_data['jobid']\n",
    "                jobwelf = json_data['jobwelf']  # 工作福利\n",
    "                job_href = json_data['job_href']\n",
    "                providesalary_text = json_data['providesalary_text']  # 薪水\n",
    "                attribute_text = \" | \".join(json_data[\"attribute_text\"])  # 薪水边上的简介\n",
    "                save_str = job_name + \",\" + providesalary_text + \",\" + companyind_text + \",\" + company_name + \",\" + jobid + \",\" + jobwelf + \",\" + job_href + \",\" + company_text + \",\" + attribute_text\n",
    "                tu_data.append((save_str, job_href))\n",
    "    return tu_data"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 8,
   "metadata": {},
   "outputs": [],
   "source": [
    "# 由于所有筛选条件都有其规定参数及其值，直接取用\n",
    "user_input = \"\"\n",
    "\n",
    "search_workyear_dict = {\n",
    "    \"请选择\": \"99\",\n",
    "    \"在校生/应届生\": \"01\",\n",
    "    \"1-3年\": \"02\",\n",
    "    \"3-5年\": \"03\",\n",
    "    \"5-10年\": \"04\",\n",
    "    \"10年以上\": \"05\",\n",
    "    \"无需经验\": \"06\"}\n",
    "\n",
    "search_cottype_dict = {\n",
    "    \"请选择\": \"99\",\n",
    "    \"国企\": \"04\",\n",
    "    \"外资（欧美）\": \"01\",\n",
    "    \"外资（非欧美）\": \"02\",\n",
    "    \"上市公司\": \"10\",\n",
    "    \"合资\": \"03\",\n",
    "    \"民营公司\": \"05\",\n",
    "    \"外企代表处\": \"06\",\n",
    "    \"政府机关\": \"07\",\n",
    "    \"事业单位\": \"08\",\n",
    "    \"非营利组织\": \"09\",\n",
    "    \"创业公司\": \"11\"}\n",
    "\n",
    "search_companysize_dict = {\n",
    "    \"请选择\": \"99\",\n",
    "    \"少于50人\": \"01\",\n",
    "    \"50-150人\": \"02\",\n",
    "    \"150-500人\": \"03\",\n",
    "    \"500-1000人\": \"04\",\n",
    "    \"1000-5000人\": \"05\",\n",
    "    \"5000-10000人\": \"06\",\n",
    "    \"10000人以上\": \"07\"}"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 9,
   "metadata": {},
   "outputs": [],
   "source": [
    "#判断页面数\n",
    "def get_page_num(url):\n",
    "    json_response = requests.get(url, headers=headers).json()\n",
    "    return json_response['total_page']"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 12,
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "https://search.51job.com/list/010000%252c020000%252c030200%252c040000%252c180200,000000,0000,00,9,99,%E5%A4%A7%E6%95%B0%E6%8D%AE,2,1.html?lang=c&postchannel=0000&workyear=02&cotype=05&degreefrom=99&jobterm=99&companysize=99&ord_field=0&dibiaoid=0&line=&welfare=\n",
      "电力大数据、人工智能工程师,1.5-2.5万/月,电气/电力/水利,上海浦源科技有限公司,131641132,五险一金 年终奖金 定期体检 绩效奖金,https://jobs.51job.com/shanghai-mhq/131641132.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-闵行区 | 2年经验 | 本科 | 招1人大数据研发工程师——开发方向,20-30万/年,多元化业务集团公司,上海金盏企业管理有限公司,131246234,五险一金 年终奖金 周末双休 工作午餐,https://jobs.51job.com/shanghai-hpq/131246234.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-黄浦区 | 2年经验 | 本科 | 招1人大数据开发工程师,0.9-1.3万/月,美容/保健,珠海市丝域连锁企业管理有限公司,127782612,带薪年假 五险一金 绩效奖金 全勤奖 节日福利 专业培训 年终奖金 员工旅游,https://jobs.51job.com/guangzhou-thq/127782612.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,广州-天河区 | 2年经验 | 本科 | 招1人\n",
      "\n",
      "初级大数据开发工程师（金融方向）,0.8-1万/月,计算机软件,上海兼达信息技术服务有限公司,126945674,,https://jobs.51job.com/shanghai-hpq/126945674.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-黄浦区 | 1年经验 | 本科 | 招2人大数据开发工程师,1-1.5万/月,计算机软件,上海万位数字技术有限公司,130729101,,https://jobs.51job.com/shanghai-bsq/130729101.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-宝山区 | 1年经验 | 本科 | 招若干人\n",
      "大数据算法工程师,1.3-2.3万/月,通信/电信/网络设备,武汉依迅北斗时空技术股份有限公司,128481261,五险一金 专业培训 绩效奖金 定期体检 员工旅游 做五休二,https://jobs.51job.com/wuhan/128481261.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,武汉 | 2年经验 | 本科 | 招若干人\n",
      "大数据开发工程师,1.8-2.5万/月,通信/电信/网络设备,诺优信息技术（上海）有限公司,118198771,五险一金 年终奖金 绩效奖金 定期体检 员工旅游,https://jobs.51job.com/shanghai-xhq/118198771.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-徐汇区 | 2年经验 | 本科 | 招2人\n",
      "大数据一体机工程师/专家,2.5-3万/月,计算机软件,威讯柏睿数据科技（北京）有限公司,130828656,,https://jobs.51job.com/beijing-cyq/130828656.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,北京-朝阳区 | 2年经验 | 本科 | 招若干人\n",
      "\n",
      "大数据开发工程师,1.1-3万/月,计算机软件,深圳市卓越方达科技有限公司,128660988,五险一金 补充医疗保险 补充公积金 专业培训 弹性工作 年终奖金 绩效奖金,https://jobs.51job.com/shenzhen-ftq/128660988.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,深圳-福田区 | 2年经验 | 本科 | 招5人\n",
      "大数据开发工程师,1.5-2万/月,计算机软件,优地网络有限公司,128927036,,https://jobs.51job.com/shenzhen-baq/128927036.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳-宝安区 | 1年经验 | 硕士 | 招若干人\n",
      "\n",
      "初级大数据开发工程师（金融方向）,0.8-1万/月,计算机软件,上海兼达信息技术服务有限公司,126945674,,https://jobs.51job.com/shanghai-hpq/126945674.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-黄浦区 | 1年经验 | 本科 | 招2人,职位描述： 1、根据项目业务需求，进行相关数据接入及数据开发实现；2、负责大数据平台性能调优；3、负责大数据平台系统问题解决、持续优化及技术运营维护；任职要求：1、计算机、软件工程等相关专业，本科及以上学历；2、1-3年大数据类开发项目经验，熟悉大数据基础平台技术的原理和内部机制；3、熟练使用hadoop生态圈中的常用组件，如Hive、impala、sqoop/datax、Ozzie、HDFS、zookeeper、spark等；4、熟悉关系型数据库如 oracle/mysql/DB2等；5、熟悉Linux操作系统, 熟练掌握Python/shell/java中一种或多种语言，python优先。有过ETL实际开发及工具(kettle,azkaban,airflow等)使用经验，熟练掌握SQL；6、工作认真负责，有较强的学习能力，动手能力和分析解决问题的能力；,上海兼达信息技术服务有限公司成立于2016年，注册资本1000万元，公司拥有高效的管理团队、强大的研发人员、高竞争力的公司产品。多年以来，秉承“拼搏 开放 创新 包容 分享”的核心价值观，通过科技创新能力和丰富的运营经验，为合作伙伴提供一站式技术解决方案。,\n",
      "\n",
      "大数据开发工程师,1.2-2万/月,文字媒体/出版,新经典文化股份有限公司,128996752,五险一金 补充医疗保险 补充公积金 绩效奖金 弹性工作,https://jobs.51job.com/beijing-xcq/128996752.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,北京-西城区 | 2年经验 | 本科 | 招3人\n",
      "电力大数据、人工智能工程师,1.5-2.5万/月,电气/电力/水利,上海浦源科技有限公司,131641132,五险一金 年终奖金 定期体检 绩效奖金,https://jobs.51job.com/shanghai-mhq/131641132.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-闵行区 | 2年经验 | 本科 | 招1人,工作内容：1、 负责新能源与智能电网领域的相关算法研究工作，解决领域内实际业务和工程问题；2、 根据产品开发需求进行算法选择及设计，并对算法进行快速验证和实现；3、 负责相关领域的前沿技术追踪。任职要求：1、电力系统、电气工程等相关专业本科毕业工作三年以上，或硕士及以上学历；2、具备较强的科研能力，能快速理解科研论文，并提取出对研发课题有用的信息进行吸收和总结；3、有丰富的数据分析和数据挖掘经验；4、熟悉图像识别算法；5、利用AI算法解决过于电网有关的现实工程问题优先；6、具备良好的动手能力，熟练掌握C/C++、Python等语言。,上海浦源科技成立于2019年7月份，创始人团队为交大2007级博士校友，具有良好的科研技术实力与和谐向上的团队战斗力。        浦源科技目前主要致力于为电力能源等大型国有企业提供基于人工智能数据挖掘与AR应用场景开发的产品定制化开发。目前产品已处于实质阶段，意向合同近千万元，即将进行多款产品投放前的标准化设计与运营。       公司工作氛围和谐，领导友好，学习氛围浓，人性化管理。,\n",
      "\n",
      "大数据开发工程师,1-1.5万/月,互联网/电子商务,广东康爱多数字健康科技有限公司,121212749,五险一金 绩效奖金 全勤奖 节日福利 员工旅游 年终奖金,https://jobs.51job.com/guangzhou-thq/121212749.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,广州-天河区 | 2年经验 | 本科 | 招2人\n",
      "大数据算法工程师,1.3-2.3万/月,通信/电信/网络设备,武汉依迅北斗时空技术股份有限公司,128481261,五险一金 专业培训 绩效奖金 定期体检 员工旅游 做五休二,https://jobs.51job.com/wuhan/128481261.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,武汉 | 2年经验 | 本科 | 招若干人,1、负责基于云端大数据平台的海量轨迹数据，完成高精度地图众包业务相关的时空轨迹大数据挖掘与分析技术及核心算法开发；2、协助时空轨迹大数据挖掘分析体系的建设，并建立和规范轨迹大数据挖掘模型标准及流程的秩序改进和优化；3、协助项目团队做好数据和算法的对接，完成项目的执行及交付。1、计算机、数学、测绘或相关专业本科及以上学历，数学基础良好；2、熟悉决策树、聚类、逻辑回归、关联分析、贝叶斯等常用的机器学习相关算法和技术；3、熟悉R、Matlab、Python等至少一门数据分析语言和PostgreSQL、Oracle、SQLServer、MySQL等至少一种主流数据库；4、熟悉Hadoop、Hive、Spark等大数据处理平台者优先；5、有时空轨迹数据处理相关算法开发经验者优先；6、熟悉传统地图数据或高精度地图数据者优先；7、具备团队合作意识和创新意识，能吃苦耐劳，有较强的学习能力和解决问题的能力，喜欢研究算法和新技术者优先。,武汉依迅北斗时空技术股份有限公司（简称：依迅北斗）是一家多级国有基金参股专注于北斗卫星导航应用的军民融合高新技术企业集团。主要业务涵盖国防军工、智能交通、智慧城市、精准农业四大版块；在北斗高精度组合制导、北斗原子钟授时、视觉测距与识别等领域拥有国际领先的核心技术。在美国硅谷、中国光谷分别建有研发中心，与武汉大学、武汉理工大学等高校共建“教学科研实习基地”、“博士后流动工作站”，公司现为中国国防工业军民融合产业联盟副理事长单位，军工资质、生产资质齐全，在全国拥有100多家紧密型合作伙伴及多家分子公司，市场占有率连续多年居行业之前列，连续5年被行业协会评选为中国卫星导航产业“十佳产品供应商、十佳运营服务商”。   公司位于中国光谷，现有员工平均年龄28岁，其中学士学位员工占到80%，技术研发员工占到60%以上。2007年公司与武汉大学、武汉理工大学等高校共建“教学科研实习基地”以及“博士后流动工作站”，构建出以产业为主导、企业为主体、技术为依托、产学研相结合、软硬件集成一体化的现代高科技企业体系。    依迅北斗坚持“政府推动，市场导向，科技支撑”的发展道路，不断提高自主创新能力，如今已拥有一支由该领域知名专家、教授及高工组成的研发队伍，并相继通过了ISO9001:2008质量管理体系认证、CCC产品认证、欧盟CE认证等国内外权威认证。   依迅北斗在全国拥有100多家紧密型合作伙伴，市场覆盖30多个省、直辖市，市场占有率连续3年居行业之前列。依迅以技术创新、应用创新带动导航与位置服务产业创新发展为着力点，积极探索市场机制，加速推进导航与位置服务产业的关键技术、核心部件和重大产品创新，公司具有自主知识产权的系列产品广泛销售于国内外，赢得了用户的一致好评，并获得了“2009年度行业创新奖”。公司的北斗系列产品、车载3G终端，特别是北斗及CDMA制式终端的市场占有率多年来一直保持行业领先地位。   目前公司已拥有国家专利7项，软件著作权19项，公司承担国家创新基金支持项目1项，公司现为“武汉东湖高新技术企业” 、“中国全球定位系统及时应用协会会员单位” 、“双软认证企业” 、“国家地球空间信息产业基地会员单位” 、“国家创新基金扶持项目承担单位” 、“中国物流与采购联合会员单位”、“湖北省软件协会理事单位”“2011年、2012年和2013年中国十佳卫星导航产业供应商”、2013年武汉市东湖高新区“瞪羚企业”等。    武汉依迅定位于“位置服务集成商及运营服务提供商”，秉承“自主创新、产业报国”的理想，依迅人以“推动我国导航与位置服务产业可持续发展”为己任。未来，武汉依迅将矢志成为位置产品及服务领域领先企业，在大力发展以自主卫星导航系统为基础的导航与位置服务产业的同时，为服务我国经济建设、社会发展和公共安全全面提升我国导航与位置服务产业核心竞争力不懈努力。公司提供：        五险一金；        周末双休；        法定节假日休息，带薪年假，春节额外5天以上带薪年假（春节假期12-15天）；        提供假日礼品、福利，员工生日福利，免费饮料（咖啡、奶茶、橙汁）和下午茶点，每年2次旅游等；        良好的职业发展空间。,\n",
      "\n",
      "大数据工程师,1-1.5万/月,互联网/电子商务,北京环宇数通科技有限公司,128023533,,https://jobs.51job.com/beijing-hdq/128023533.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,北京-海淀区 | 2年经验 | 本科 | 招2人大数据研发工程师——开发方向,20-30万/年,多元化业务集团公司,上海金盏企业管理有限公司,131246234,五险一金 年终奖金 周末双休 工作午餐,https://jobs.51job.com/shanghai-hpq/131246234.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-黄浦区 | 2年经验 | 本科 | 招1人,岗位职责：          1. 负责大数据、BI系统相关模块的实施；          2. 依据业务场景、分析需求提供技术、业务解决方案并加以实现；          3. 根据业务进行数据集市设计，参与CDH平台相关应用项目的 ETL    设计、开发、维护工作；          4. 领导交办的其他任务； 任职资格：          1.全日制本科， 3-5年数据开发经验，2年以上大数据平台经验；          2.    熟悉kettle、Informatica、Sqoop、flume、kafka等工具;          2. 熟悉Hadoop平台,2年以上hive、Spark开发经验；          3. 了解BI系统，有数据管理经验，有维度建模相关经验；          4. 熟悉DB2、Oracle、MongoDB、Hbase等数据库，精通sql；          5. 熟悉Linux开发环境和shell脚本，熟悉 Python 开发优先；          6. 优秀的业务理解能力、逻辑性和沟通能力，能跨部门合作沟通；,上海金盏企业管理有限公司成立于2017年，金盏关注国内外各行各业大中小企业的发展动态，深刻洞察包括金融、房地产、互联网、传统制造业在内各大行业的发展趋势与先机，业务范围横跨文化传媒、地产、金融、互联网、生物工程、科技六大领域。,\n",
      "\n",
      "\n",
      "大数据开发工程师,1-2万/月,计算机软件,沈阳神之马科技有限公司,131608638,,https://jobs.51job.com/shanghai-pdxq/131608638.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-浦东新区 | 2年经验 | 大专 | 招5人\n",
      "大数据开发工程师,1-1.5万/月,计算机软件,上海万位数字技术有限公司,130729101,,https://jobs.51job.com/shanghai-bsq/130729101.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-宝山区 | 1年经验 | 本科 | 招若干人,岗位职责：1、大数据流计算开发；2、管理、优化并维护Hadoop、Spark集群，保证集群规模持续、稳定；3、协助团队成员建立数据模型，对数据进行统计。招聘要求：1、本科以上学历，计算机、数学或统计学相关专业；2、1年以上大数据开发经验，能独立搭建并维护大数据框架；3、熟悉kafka、spark、HDFS、hbase、ElasticSearch等技术，并有相关落地项目经验；4、理解能力、沟通能力强，有较强的团队合作精神；5、热爱学习研究新技术并尝试使用。,上海万位数字技术有限公司是国内领先的全领域物联网位置服务品牌。总部位于上海，分别在广州、湖南、南京设有研发中心和解决方案中心。我们面向个人、家庭、行业和公共提供个人消费级和企业级物联网数字服务。面向物与物、人与物的IoT（Internet of Things）联接管理平台，支持多种垂直行业应用快速集成，同时提供多种API满足多样化设备接入，满足运营商、企业和行业构建物联网端到端整体解决方案。万位科技以智能位置服务终端为基础，将海量的实时感知数据收集到万位智云大数据平台上，面向不同行业领域建立位置云平台，使客户能对平台上的所有位置大数据进行处理、管理、可视化和分析，帮助客户催生更多的数据衍生价值,\n",
      "\n",
      "大数据/算法开发工程师,1.5-3万/月,计算机软件,亚信科技（成都）有限公司,131137927,,https://jobs.51job.com/beijing-hdq/131137927.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,北京-海淀区 | 2年经验 | 本科 | 招1人\n",
      "大数据开发工程师,0.9-1.3万/月,美容/保健,珠海市丝域连锁企业管理有限公司,127782612,带薪年假 五险一金 绩效奖金 全勤奖 节日福利 专业培训 年终奖金 员工旅游,https://jobs.51job.com/guangzhou-thq/127782612.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,广州-天河区 | 2年经验 | 本科 | 招1人,1、负责数据接入、数据清洗、底层重构，业务主题建模等工作；2、负责大数据中台整体的计算平台开发与应用；3. 开发可靠、高效、准确的实时和准实时采集和计算代码，并形成整体框架和接口供调用；4. 深度挖掘业务数据，通过用户行为分析、关联分析，扩展和优化现有分析系统；5. 能主动的了解和熟悉数据业务，具备解决实际问题的抽象和设计能力。岗位要求1、计算机或相关专业本科以上学历；2、有2年及以上大数据平台开发方面相关工作经验；3、熟悉整个大数据的完整处理流程，包括实时和离线日志采集、清洗、预处理、存储、任务调度、分析挖掘和数据可视化;4、熟悉Hadoop生态圈组件，精通Hadoop、Spark、Hive、HBase、Flink、Kafka、ElasticSearch等主流的大数据技术，熟练掌握 Java 或 Scala 语言;5、熟悉linux开发环境、熟悉python，ruby、shell、Java等脚本编程语言（任一）;6、熟悉掌握Mysql、redis、MongoDB、Hive、Hbase 等数据库调优手段;,丝域集团————首创”以养代疗”的护发新模式，是养发、护发行业的一片蓝海企业简介珠海市丝域连锁企业管理有限公司成立于2003年，总部设在珠海市香洲区南屏科技园，是中信产业基金控股的集研发、生产、销售于一体的综合性科技型企业。丝域首创“以养代疗”的养发护发新模式，致力于对头皮头发的全面护理和调养，开创了养发护发行业的一片新蓝海。经过十几年的发展，丝域凭借雄厚的产品研发实力与卓越的品牌运营管理能力，在全国设立了8大区域子公司，并在北京、天津、上海、广州、深圳、西安、成都、重庆、武汉、长沙、昆明、南宁、贵阳、珠海、中山、东莞、佛山等200个以上大中城市的高端社区和大型商场开设了超过2000家丝域养发馆，拥有百万尊贵会员和上万名从业人员。发展历程※2003年   ①丝域头皮头发护理系列正式面世。※2004年   ①丝域育发水获得中国卫生部颁发的《生发育发类特殊化妆品卫生许可证》。※2005年   ①首家丝域门店在深圳景田开业，开创中国养发行业历史篇章。※2006年   ①丝域养发项目整合改造崭新面市，珠海夏湾店开业。※2008年   ①丝域在中国突破100家连锁门店，丝域教育部成立。※2009年   ①先后推出铂金和草本原液系列产品，养发技术革命性飞跃。※2010年   ①丝域草本原液及致尊系列上市。②丝域会员优雅女子大赛在珠海市隆重召开。※2011年   ①丝域玫瑰精油养发及五矿铂金系列全新上市。           ②丝域建立了规范的内部教育系统，丝域商学院正式成立。           ③获得《国家高新技术企业认证》，生产车间获欧盟标准GMPC（ISO22716）认证。※2012年   ①丝域进一步规范店群管理模式，统筹管理约600家门店。※2013年   ①丝域养发门店数突破1000家，丝域品牌全面升级。           ②上线***届全国丝域门店达人秀PK大赛。※2014年   ①丝域套盒配方革命性升级。           ②牵手中信产业基金 与其成为战略合作伙伴，开启丝域新时代※2015年   ①丝域收购显赫植发香港业务，引进全球先进植发机器人，开创丝域头发养疗新篇章。           ②成立直营事业部，打造星级直营门店，树立品牌标杆。※2016年   ①丝域获得《国家高新技术企业认证》。           ②开设拥有自主知识产权、经欧盟标准认证（GMPC）的养发产品生产线。           ③显赫植发在20多个城市开展6D美学植发全国巡回发布会。※2017年   ①丝域养发门店遍布全国200多个城市，门店超过2000家，会员逾150万。           ②丝域养发品牌成为第十二届中国超级模特大赛***指定品牌。           ③丝域热心公益，丝域总裁陈英燕***当选珠海儿童保护协会名誉会长。           ④丝域品牌战略升级，签约国内一线艺人担任丝域爱养节形象代言人。           ⑤携手1000多名全国各地优秀丝域家人成功举行了五天四夜的910“星梦筑航、启新丝域”品牌发布会暨十五周年庆典，开启丝域新篇章，会上丝域发布首份《中国人头发亚健康白皮书》和制定首个《养发行业SSR服务标准》。            ⑥协同业界资深专家，成立中国首个头皮研究中心【丝誉头皮研究中心】，用匠心将丝域养发的专业推向新的高度。            ⑦一站式头皮养疗尊贵系列套餐【丝域水光王】、奢华抗衰保养升级项目【丝域鲟鱼子臻致修护系列】、提神舒缓功效项目【丝域龙脑调养护理】、专为暗哑干枯毛躁发质研制的【丝域樱花亮泽SPA套】重磅面市。            ⑧由丝域养发赞助的公益电影《爱，不断线》在腾讯等几十个视频网站同步上映，引起社会很大关注，该电影还荣获第五届亚洲微电影艺术节“金海棠奖”。            ⑨丝域养发门店VI形象升级至3.0。※2018年3月 ①丝域“新知本、她力量”2018丝域养发品牌升级发布会暨投资研讨会在北京大规模开启。公司福利：1、实行5天8小时工作制，快乐工作，健康生活；2、提供中午和晚上的工作餐，三菜一汤，幸福满满；3、依法购买社保五险，生病不用怕，到老不用愁，你的平安快乐就是我们的心愿；4、享受超出国家法定节假和带薪年休假(公司福利年休假、社会工龄年休假)；5、内部养发福利券，季度发放，***的服务给***的你；6、部门基金，每月分别拨给各部门一笔活动经费，任你去嗨；7、节假日发放现金或礼品福利，各种节日，各种福利，一年四季，惊喜不断；8、定期组织员工免费体检，为你的健康加分；9、每年组织国内外旅游，世界很大，我们带你去看；10、生日会，只属于您的日子里能幸福地享受一下轻松；11、为员工提供完善入职培训和晋升机会。乘车路线：  16（单）、25、34、80、81、201、202、204、206、207、45、601、602、605、608、609、603、83、601B、602A、86、601C夜间专线(井岸—拱北万家)到南屏公交柏宁巴士站下车，见加华加油站右转50米见橙白楼“丝域”即是。公司网站：***********************,\n",
      "大数据一体机工程师/专家,2.5-3万/月,计算机软件,威讯柏睿数据科技（北京）有限公司,130828656,,https://jobs.51job.com/beijing-cyq/130828656.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,北京-朝阳区 | 2年经验 | 本科 | 招若干人,工作职责：1、 负责存算一体机中分布式内存数据库在一体机中的部署、测试、优化等工作；2、 负责存算一体机中分布式存储系统的部署、测试、优化等工作；3、 及时发现一体机的系统隐患、瓶颈，并解决问题；4、 重点项目的支持工作。工作要求：1、 计算机或相关专业本科以上学历，2年以上开发经验；2、 熟悉大数据的应用场景；3、 熟悉计算、存储、网络的实施与优化；4、 有软硬件一体化产品、大数据相关产品经验者优先；5、 有钻研精神，态度积极，自我驱动。,柏睿数据是一家以数据库为核心的“Data+AI”数据智能基础软件公司，是新一代国际数据库领航者。公司创建于2014年，立足北京，在硅谷、广州、武汉、成都设有研发中心，在上海、兰州、杭州设有子公司。研发团队汇聚原贝尔实验室、惠普实验室、Oracle、SUN等***专家。公司的企业客户主要是政府类（网信办、交通局、统计局、财政局）、金融、运营商,\n",
      "\n",
      "大数据开发工程师,1.1-3万/月,计算机软件,深圳市卓越方达科技有限公司,128660988,五险一金 补充医疗保险 补充公积金 专业培训 弹性工作 年终奖金 绩效奖金,https://jobs.51job.com/shenzhen-ftq/128660988.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,深圳-福田区 | 2年经验 | 本科 | 招5人,1、对公司各个系统数据进行梳理，排查，建立统一数据字典；2、制定数据标准，数据开发规范标准，推广并监督实施；3、参与各个系统的数据架构设计，提出合理建议；4、搭建公司统一数据平台，为上层中台服务和相关报表系统提供底层数据支撑；5、探索新的数据使用场景，使数据转换为商业价值。岗位要求：1、本科及以上学历，计算机相关专业；2、具有优秀的编码能力，至少掌握一种编程语言：Java/Python/Scala以及脚本语言Shell。熟练使用SQL,HQL;3、掌握主流关系型数据和非关系型数据库的使用，Postgresql/Oracle，熟悉常用函数和存储过程开发。4、熟悉Hadoop技术平台的生态圈， Hdfs、Yarn、Hbase、Hive、Sqoop等；5、熟悉分布式计算框架Spark；流式计算，实时数据处理架构；6、熟练使用ETL工具和其他数据同步工具，Kettle等；7、熟悉基于hadoop生态搭建数据仓库实施步骤；8、掌握数据建模理论并有相关实施经验。,深圳市卓越方达科技有限公司（以下简称卓越方达），是国内领先的企业级商务智能解决方案供应商。卓越方达帮助企业更好地跟踪，理解和管理自身绩效，卓越方达的解决方案充分利用了企业数据库、企业资源规划（ERP）以及客户关系管理（CRM）等一系列系统中存储的信息。商务智能的广泛应用包括企业报表、管理仪表和记分系统、客户智能应用、财务报表以及用户和合作伙伴外联网等。这些解决方案帮助企业深入了解自己的业务，赢得并维系有价值的客户，节约成本，优化供应链，提高生产力，增加收入。    公司历经10年的不断进取，目前已经成长为中国本土IT外包服务和商业智能领域的领军企业，卓越方达总部设在深圳，在广州，北京，香港有分公司。卓越方达在全国主要城市有自己的工程师团队，服务可覆盖全国，能够为超过50000名终端用户提供专业IT服务公司网站：********************,\n",
      "\n",
      "\n",
      "大数据开发工程师,0.7-1万/月,法律,北京市盈科律师事务所,130830864,五险一金 绩效奖金 周末双休 带薪年假 餐饮补贴 节日福利,https://jobs.51job.com/beijing-cyq/130830864.html?s=sou_sou_soulb&t=0,民营公司 | 5000-10000人,北京-朝阳区 | 1年经验 | 大专 | 招1人\n",
      "大数据架构工程师,,互联网/电子商务,珍岛信息技术（上海）股份有限公司,123875191,五险一金 交通补贴 餐饮补贴 项目奖金 晋升空间 年终奖金 技术大牛,https://jobs.51job.com/shanghai/123875191.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,上海 | 1年经验 | 本科 | 招若干人\n",
      "大数据开发,1-1.5万/月,计算机软件,上海海万信息科技股份有限公司,127410097,,https://jobs.51job.com/shenzhen/127410097.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳 | 2年经验 | 大专 | 招2人\n",
      "大数据开发工程师,1.5-2万/月,计算机软件,优地网络有限公司,128927036,,https://jobs.51job.com/shenzhen-baq/128927036.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳-宝安区 | 1年经验 | 硕士 | 招若干人,岗位职责：    1、负责我公司大数据产品的每日亿级数据处理和分析；    2、负责我公司大数据产品接口平台的开发。         任职要求：    1、计算机，数学，统计等相关理工科专业硕士毕业生，985、211优先录取；    2、良好的逻辑思维能力和数据敏感性；    3、责任心强，有良好的沟通能力和团队协作能力；    4、了解Hadoop分布式系统，了解NoSQL数据体系原理，有Hive、MapReduce、Spark、Kylin、Presto、Redis、ES或分布式数据仓库开发经验者优先；    5、熟练掌握数据分析体系架构、方法和相关数据建模知识，有海量数据分析经验者优先；    6、有一定的linux、unix使用经验，熟悉基础命令操作，简单shell脚本编写能力；    7、熟悉常用关系型数据库Oracle、Mysql等，熟练掌握sql语句编写；    8、熟悉常用开发框架Mybatis，Spring等，有Java开发经验者优先。,优地网络有限公司前身为UT斯达康（深圳）技术有限公司，是专门从事现代通信领域前沿产品研究、开发、生产及销售的高科技通信公司，专注于IPTV、OTT等新媒体业务，是以IP为基础的端到端网络解决方案和服务供应商。优地网络有限公司集中了UT斯达康（中国）有限公司的所有研发优势资源，为新技术研究、互动多媒体平台产品开发和设计、通信系统和通信终端研发、通信系统和终端产品生产、自主销售为一体的综合性企业。秉承专注创新与追求卓越的优良传统，公司推出了一系列完善的、适合国家三网融合建设的技术和产品，以满足未来电信、广电、电力及教育等领域的市场需求和发展。2017年11月，为了公司的战略发展，UT斯达康（深圳）技术有限公司更名为优地网络有限公司，与UT斯达康（中国）股份有限公司、深圳优地科技有限公司、以及优地技术有限公司同为优地集团旗下公司。2018年9月，为了紧跟公司不断壮大的业务实力，优地网络有限公司迁址深圳市宝安区庭威产业园，入住三千多平的新办公区。新的办公环境高端大气，格局明晰，功能全面。培训室、会议室、办公区、贵宾室、健身房、休息区一应俱全。在营造健康、舒适的办公环境的同时也带来了新风气，新思路。,\n",
      "大数据开发工程师,1.8-2.5万/月,通信/电信/网络设备,诺优信息技术（上海）有限公司,118198771,五险一金 年终奖金 绩效奖金 定期体检 员工旅游,https://jobs.51job.com/shanghai-xhq/118198771.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-徐汇区 | 2年经验 | 本科 | 招2人,1. 负责项目实施过程中的数据源分析，并能够独立完成ETL过程； 2. 参与数据平台架构的设计及开发；3. 参与数据平台ETL流程优化及解决ETL相关技术问题；4. 对分析需求的支持；5.上级安排的其他临时性工作；任职要求：1、 有一定的编程基础，熟悉java和Python者优先；2、 海量数据的ETL开发，抽取成各种数据需求；3、 熟悉hadoop生态圈，如hbase，hive,spark,flume,storm,kafka等有实际的工作经验；4、 熟练掌握SQL语法及熟练使用MYSQL、Oracle、SQLServer等一种关系型数据库，以及NoSQL（hive、Redis）等非关系数据库,能编写复杂业务逻辑的SQL脚本.此为必备项；5、 熟悉Linux或Unix操作系统，掌握常用命令，此为必备项；6、 有1到2年基于hive的实际sql脚本开发经验，以及sql语句优化调优等，逻辑能力强.此为必备项；7 、有airflow、Kettle等ETL工具使用经验尤佳；8、积极主动、学习能力强、沟通能力强、抗压性强。,诺优信息技术(上海)有限公司成立于 2010 年，是一家扎根于上海漕河泾新兴技术开发区多年的高新技术企业，主营业务专注于5G移动通信建设和优化、智慧家庭大数据AI分析、工业互联网智能运维等领域的领域，是业内领先的大数据ICT系统集成商和仪器仪表供应商。     诺优是一家研发创新驱动型企业，研发技术人员占比超过70%，员工90％以上为通信、计算机专业本科以上学历，包括多名名校硕士、博士。公司具备成熟专业的研发体系，通过了ISO9001、ISO14001、OHSAS18001和软件开发成熟度模型CMMI3级认证，是上海市“高新技术企业”、“专精特新”企业和双软企业，中国通信企业行业会员等。  公司通过十多年深厚的技术积累和多年服务行业大客户的丰富经验，在行业领域建立了稳固的市场地位和良好的品牌形象，成长为业内***的头部公司。公司秉承着“数据创造价值”的企业理念，服务客户包括中国移动、中国电信、中国信通院、华为、中国商飞等多家世界500强公司。除了上海总部外，我们还在北京、沈阳、石家庄、成都、重庆、武汉、福州、广州、深圳等地均设立了服务办事机构。  作为一家员工平均年龄不到30岁的公司，我们秉承\"海纳百川，人尽其才”的用人宗旨。给每一位加入诺优的青年奋斗者，以充分的职场发挥空间，坚持以人为本、快乐工作的管理理念。并提供持续地自我学习、团队激励的成长机制和晋升通道，着力打造具备高素质及强竞争力的人才梯队，与公司共同奋斗，携手成长。    公司为员工提供舒适宽松的办公环境、极富行业竞争力的薪酬，超出预期的年终奖金，以及优渥完善的国家统筹福利保障,\n",
      "\n",
      "\n",
      "大数据开发工程师,1.5-2万/月,计算机软件,上海远涛信息技术服务有限公司,130708527,,https://jobs.51job.com/beijing-cyq/130708527.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,北京-朝阳区 | 2年经验 | 本科 | 招15人大数据开发（数据分析方向）,1-2万/月,互联网/电子商务,深圳市小亿网络有限公司,129817403,五险一金 员工旅游 年终奖金 弹性工作 定期体检,https://jobs.51job.com/shenzhen/129817403.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳 | 1年经验 | 本科 | 招1人\n",
      "\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "大数据开发工程师,1-1.5万/月,互联网/电子商务,广东康爱多数字健康科技有限公司,121212749,五险一金 绩效奖金 全勤奖 节日福利 员工旅游 年终奖金,https://jobs.51job.com/guangzhou-thq/121212749.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,广州-天河区 | 2年经验 | 本科 | 招2人,工作职责：1.负责hadoop集群的开发和维护；2.负责实时数据采集和分析计算的平台开发；3.负责可视化平台，数据后台接口的开发和维护；4.负责用户行为标签库，搜索行为和推荐底层数据分析；5.负责网站分析，用户行为分析。任职要求：1.计算机相关专业本科以上学历，1年以上大数据开发经验；2.熟练使用Java语言；3.熟悉Hadoop/HBase/Spark/Storm/Redis/Kafka/ES/Flume技术及其生态圈，具备相关项目开发经验，有数据实时计算项目经验优先。,我们的规模：康爱多成立于2010年，经国家食品药品监督管理局审批，属医药电商的领军企业。公司现有1200多人，2019年销售业绩超30亿。我们现有业务：康爱多历经九年的发展，在电商平台、互联网医疗、新零售O2O版块上取得了快速的发展，打造了生殖健康、心脑血管、皮科、肝科的专业慢病管理服务平台，实现了患者、医生、健康服务的生态管理。我们未来的定位：康爱多的核心理念是合理用药更健康，将为成为国际化智能化的数字健康服务平台而奋斗。我们的荣誉：l   连续3年蝉联“中国电子商务百强企业”，l   连续5年蝉联“广东省守合同重信用企业（网商）”l   连续5年蝉联“中国医药电子商务10强”荣誉称号l   2017年荣获“最具投资价值企业”l   2018年荣获“连续五年极具影响力的平台商城”l   2018年荣获“中国药店2017~2018价值榜50强”、l   2018年荣获“2018年度大健康产业最具创新力企业”l   2019被评为“最具影响力医药健康互联网平台”l   2019年荣获“中国大健康产业最具成长力奖”我们现有的业务平台：1、自建平台：PC端：康爱多网上药店；移动端：康爱多手机商城；移动应用：康爱多掌上药店（安卓、IOS客户端）；微商城：gd360kad2、互联网医疗平台；3、O2O体验店：康爱多云景体验店、康爱多省人民医院体验店、大德店、大良店、番禺店、东晓南店、东圃店、岗顶店、南岸路店、多宝路店、沙太路店等公司办公地点：广州市天河区元岗路200号慧通产业园B8整栋简历接收邮箱：kadhr@360kad.com联系人及电话（微信公众号：康爱多HR）：潘小姐 18927553422钱小姐 18922292455（***）赖小姐 18922174863/lailijing52030（微信）,\n",
      "大数据开发工程师,1-2万/月,计算机软件,沈阳神之马科技有限公司,131608638,,https://jobs.51job.com/shanghai-pdxq/131608638.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-浦东新区 | 2年经验 | 大专 | 招5人,,我们是一家软件开发公司,\n",
      "\n",
      "\n",
      "大数据工程师,0.8-2万/月,互联网/电子商务,广州后知后觉信息咨询有限公司,126673538,节日福利 团队有活力 企业文化好 绩效奖金 五险一金 年终奖金 专业培训 弹性工作,https://jobs.51job.com/guangzhou/126673538.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,广州 | 2年经验 | 大专 | 招1人\n",
      "大数据开发工程师,1.4-2万/月,通信/电信运营、增值服务,上海航动科技有限公司,127889148,做五休二 周末双休 带薪年假 五险一金 绩效奖金 全勤奖 节日福利 专业培训 通讯补贴 高温补贴,https://jobs.51job.com/shanghai-xhq/127889148.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-徐汇区 | 2年经验 | 本科 | 招1人\n",
      "大数据/算法开发工程师,1.5-3万/月,计算机软件,亚信科技（成都）有限公司,131137927,,https://jobs.51job.com/beijing-hdq/131137927.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,北京-海淀区 | 2年经验 | 本科 | 招1人,1.结合大数据开源框架，开发大数据分析平台基础通用架构组件；2.利用大数据、深度学习等技术开发安全分析场景并形成通用模块；3.开发安全大数据相关的业务处理功能。1.熟练掌握Spark，Hadoop，Kafka，Flume，Hive，Sqoop等大数据开源框架，具有2年以上代码开发经验；2.熟悉Cloudera Manager，Zookeeper，Yarn等大数据环境管理工具，具有集群搭建经验；3.熟练掌握Elasticsearch，Solr等全文检索框架，具有代码开发经验；4.至少熟悉一种编程语言，Scala、Python、Java等，熟练使用SQL；5.熟练掌握常用的大数据分析、机器学习和模式识别（包括但不限于随机森林、GBDT、SVM、LR等）的算法原理和基础理论；6.具备一定的机器学习和深度学习理论基础，熟练使用Caffe，Keras，Torch，Tensorflow等深度学习框架，喜欢研究前沿技术，有实际项目应用经验者优先。,亚信安全——护航产业互联网，安全数字世界亚信安全是中国网络安全软件领域的领跑者，作为“懂网、懂云”的安全公司，致力于护航产业互联网，成为在5G云网时代，守护云、网、边、端的安全智能平台企业。在万物互联的新时代，数字化经济蓬勃发展，5G网络建设进入高潮，云计算方兴未艾，5G网络、云计算、边缘计算与千行百业的深度融合成为大势所趋：云、网、边、端的架构愈发清晰，构筑5G时代的感知网络；数字身份将无处不在，是数字世界接入、访问的基础；数据在感知网络中采集、传输、汇聚，成为核心生产资料；新型网络从连接人到连接物，进入大连接时代。政府及企业对于安全的需求也顺应上述变化，正在从单点的产品向联动智能的整体解决方案转移。在这一背景下，亚信安全提出了“安全定义边界”的发展理念，以身份安全为基础，以云网边安全和端点安全为重心，以安全中台为枢纽，以威胁情报为支撑，构建“全云化、全联动、全智能”的产品技术战略，赋能企业在5G时代的数字化安全运营能力。公司主营业务分为以下四大产品服务体系： 1、以泛身份安全和数据安全为主体的数字信任及身份安全产品体系； 2、以泛终端安全、云及边缘安全、高级威胁治理和边界安全为典型的端点安全产品体系； 3、以大数据分析及安全管理和5G云网边管理为代表的云网边安全产品体系； 4、以威胁情报、高级威胁研究、红蓝对抗、攻防渗透等为内容的网络安全服务体系。,\n",
      "\n",
      "大数据开发工程师（WHY1207）,1-1.5万/月,计算机软件,招银云创信息技术有限公司武汉分公司,129076148,五险一金 补充医疗保险 补充公积金 交通补贴 餐饮补贴 通讯补贴 绩效奖金 年终奖金,https://jobs.51job.com/wuhan-dhxjs/129076148.html?s=sou_sou_soulb&t=0,民营公司 | ,武汉-东湖新技术产业开发区 | 2年经验 | 本科 | 招2人\n",
      "大数据开发（数据分析方向）,1-2万/月,互联网/电子商务,深圳市小亿网络有限公司,129817403,五险一金 员工旅游 年终奖金 弹性工作 定期体检,https://jobs.51job.com/shenzhen/129817403.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳 | 1年经验 | 本科 | 招1人,岗位职责：1、负责BI平台的建设，和日常数据需求的输出；2、维护离线和实时数据仓库；3、维护数据指标字典；4、参与用户画像体系建设，个性化推荐系统建设，风控系统建设；5、主动从数据中发掘价值。任职资格：1.本科及以上学历，计算机或数学相关专业。有数据分析、数据挖掘和数据建模经验者优先；2.学习能力强，对数据敏感；3.精通HiveSQL，了解阿里云Dataworks、Maxcompute的优先；4.理解数据仓库思想，理解数据建模、数据治理；5.具备良好的分析解决问题能力，责任心强，良好的沟通、团队协作和自我驱动能力；,深圳市小亿网络有限公司作为一家互联网科技公司，致力于打造最有价值的技能共享平台， 为所有人连接分享每一份技能。旗下品牌“万师傅”拥有网站、微信小程序、接单易 APP、ARS 系统等产品。为家居电商、物流公司、家居实体门店等B端用户提供配送、安装、维修等完整的一站式售后服务解决方案；为C端家庭及个人用户提供上门安装、维修、疏通、清洁等居家生活便民服务；帮助掌握安装、维修等专业技能的师傅群体提升服务能力、提高收入、建立个人品牌、实现自我价值。    2013年12月16日成立以来，万师傅平台注册师傅数已超80万，服务范围覆盖全国363个城市共2853个区/县，服务超过38万企业用户及100万个人用户，累计服务超4000万次。    以极致的用户体验为核心，万师傅将在家居售后服务领域不断创新，用新产品和新技术服务于更多 用户，让所有人轻松享受优质便捷的家居服务。让用户自由选择，让师傅自主经营    万师傅基于家居服务市场的特征，以“让用户自由选择，让师傅自主经营”的独创经营理念，为用户和师傅提供平台。让用户自由选择    用户可根据自身需求，自由选择找师傅、找总包服务商、系统对接等不同解决方案，构建并完善售后服务链条。让师傅自主经营    万师傅以不断提升行业服务水平为己任，独创6大师傅课程体系，依托线上线下培训活动，累计培训专业师傅1800万人/次。不仅帮助师傅提升服务技能，更帮助他们树立“自主经营”意识，转变思维，成为个人品牌经营者。以更强的服务意识和责任感，用心对待每一次服务。技术创新，我们一直在路上    多年来，万师傅坚持走自主创新之路，凭借专业产品技术团队的不断创新，已取得多项专利和超过38项软件著作权，并于2017年8月被正式评选为国家高新技术企业。    万师傅自主研发LBS地图定位技术，智能推单系统、ERP管理系统、ARS管理系统等，拥有4000万的服务数据，基于平台大数据+智能算法，为用户和师傅构建独立的画像体系，根据用户需求，精准快速匹配附近最能胜任的师傅上门服务。师傅得以通过高精准的服务范围，大幅节省时间和距离成本，从而实现工作效率的提升，进而提高收入，同时用户也因此享受更高性价比的服务。    未来，小亿网络将不断探索新技术和新模式，并始终如一地关注用户需求，让找师傅这件事简单便捷，让家居生活更美好。公司愿景Company Vision成为最有价值的技能共享平台，为所有人连接分享每一份技能。公司价值观Company Values（一）真诚守信：1、尊重事实，用事实说话。2、诚实正直，不弄虚作假。3、信守承诺，说到做到。4、敢于承认自己的过错，不推卸责任。5、对有损公司权益的不诚信行为及时有效的制止。（二）拼搏奋斗：1、自我激励，积极向上，努力拼搏，争取机会。2、勇于挑战困难，突破自我，不要自我设限。3、走出舒适区，拒绝游手好闲，消磨时光。4、奋斗体现在脚踏实地的努力做好每一件小事，认真对待每一个细节。5、以结果为导向，使奋斗者得到合理的回报。（三）成长创新：1、深入思考问题，专研自己领域，让自己成为专家。2、有计划的学习成长，持续提升自己。3、虚心向优秀的人学习，并转化为自己的创造力。4、总结成功经验，同时总结不足，不断完善，持续提升。5、积极开拓新的方式、方法去创造价值或解决问题。（四）团结协作：1、团队平等且开放，反对任何形式的官僚主义。2、营造快乐的团队氛围，追求开心且高效的工作方式。3、决策前积极向团队提出自己的建议，决策后积极响应，支持团队。4、积极主动的分享经验，帮助同事，善用团队解决问题。5、积极响应其他部门，简化不必要的流程，提升工作效率。6、共同承担结果，共同享受成果。万师傅名字的由来About Name师傅一词是对有专门技艺的工匠的尊称，代表各种有专业技能的人。“万”字不仅是指数量，还寓意：多，极，绝对。代表很多的师傅（数量）、追求极致的师傅（精神）、绝对专业的师傅（专业）、万能的师傅（全面）。万师傅因此得名。,\n",
      "\n",
      "大数据开发工程师-GZ,1.2-1.8万/月,互联网/电子商务,北京深演智能科技股份有限公司,128738166,周末双休 节日福利 岗位晋升 五险一金 补充医疗保险 定期体检,https://jobs.51job.com/guangzhou/128738166.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,广州 | 2年经验 | 本科 | 招若干人\n",
      "大数据开发工程师,0.7-1万/月,法律,北京市盈科律师事务所,130830864,五险一金 绩效奖金 周末双休 带薪年假 餐饮补贴 节日福利,https://jobs.51job.com/beijing-cyq/130830864.html?s=sou_sou_soulb&t=0,民营公司 | 5000-10000人,北京-朝阳区 | 1年经验 | 大专 | 招1人,,北京市盈科律师事务所简称盈科律师事务所，是一家全球化法律服务机构，总部设在中国北京，在中国大陆拥有78家分所，在美国、巴西、墨西哥、英国、意大利、匈牙利、波兰、比利时、西班牙、摩纳哥、希腊、德国、斯洛伐克、捷克、瑞士、法国、韩国、土耳其、俄罗斯、哈萨克斯坦、吉尔吉斯斯坦、蒙古、以色列、阿根廷等盈科全球网络覆盖81个国家的140个国际城市。盈科律师事务所10000余名员工，致力于为客户提供全球商务法律服务，为客户创造价值。盈科在发展中坚持\"以人为本\"的人才战略，逐步形成了由专业律师人才、专业市场人才、专业管理人才组成的人才队伍，保障了律师事务所整体战略目标的实现。 业务范围涵盖国际贸易、海外投资、公司、资本证券、两岸事务、私募、投融资与并购、知识产权、房地产、环境保护、海商海事等专业领域。此外，盈科还聘请了在国内外法学理论及实务领域享有声誉的法学专家担任专家顾问。为客户提供满意的法律服务是我们矢志不渝的目标，盈科坚持\"以客户为导向\"，专门成立\"客户服务中心\"和\"投融资中心\"，始终以客户的需求为关注焦点，以顾客满意为工作目标，充分发挥盈科全球化法律服务体系的优势，整合全球各地办公室、各专业部门和全体律师的资源，不仅为客户解决法律问题，还为客户提供商业机会、促进客户合作，为客户提供专业化、综合性的法律服务。盈科全球化优质的法律服务赢得了客户的信赖，在客户拥有量、市场份额、创收总额等方面都有显著提升，目前，律所已加入了150多家行业和企业协会，为100000多家海内外企业提供法律服务。作为一家具有全球法律服务能力的商务型律师事务所，盈科积极融入世界，构建全球化法律服务体系，并十分注重增进与国外律师事务所的交流与合作。引进和培养国际化的律师人才，坚持完善和发展律师事务所英语、韩语、法语、德语、日语、意大利语等多语种法律服务能力，全面提升律师事务所国际法律业务的服务能力。\"流水之为物也，不盈科不行；君子之志于道也，不成章不达\"。盈科律师事务所将努力发挥自身商务律师事务所的优势，整合全球资源为客户提供优质、高效的法律服务，让客户满意。,微信分享\n",
      "大数据架构工程师,,互联网/电子商务,珍岛信息技术（上海）股份有限公司,123875191,五险一金 交通补贴 餐饮补贴 项目奖金 晋升空间 年终奖金 技术大牛,https://jobs.51job.com/shanghai/123875191.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,上海 | 1年经验 | 本科 | 招若干人,1、负责Hadoop、HBase、Spark、Storm、Kafka集群的可靠性2、负责基于Yarn资源调度服务框架的数据处理服务的优化与运维工具开发3、负责开发和优化基于Hive和Spark SQL的数据仓库服务任职要求:1、掌握基本的计算机科学知识，包括算法与数据结构，操作系统与网络知识等；2、熟悉Nutch, Lucene, Mina, Thrift 或者类似功能的框架之一；3、熟悉Java/Scala等一、二种适用于开发并行服务的语言，並可以独立开发集群所需要的工具、框架、API或其它服务程序；4、熟悉Hadoop和相关ecosystem的HBase/Hive/Yarn/Spark的运维，并且有足够保障的经验；,珍岛信息技术(上海)股份有限公司，简称珍岛集团，秉承“整合数字资源，技术驱动营销”的核心运营理念，专注于数字营销技术、产品、服务、资源的创新与整合，致力于打造全球SaaS智能营销云平台，面向全球企业提供营销力软件及服务，现已形成IaaS（珍岛云计算）、珍岛PaaS(数据中台)、SaaS（场景化智能营销工具集），以及威客服务平台、云应用市场、数字媒体自助等子平台，聚焦全球Marketingforce（全球营销力赋能），为企业、院校、园区等客群提供360度全方位多场景赋能。目前集团规模三千余人，上海为总部，无锡为基地，同步辐射苏州、杭州、温州、宁波、深圳、 广州、 香港、成都、北京、昆山、江阴、南通等二十余家分子公司，累计服务企业客户超十万家。经过多年在技术创新领域的探索与积累，目前，珍岛集团旗下公司已获得2019年度国家中小企业公共服务示范平台、商务部和财政部现代服务业综合试点单位、国家科学技术进步二等奖、国家高新技术企业4家、双软认证企业2家、2019年中国互联网百强企业、中国科协2017年全国示范院士专家工作站、上海市科技小巨人企业、上海名牌企业、上海市品牌培育示范企业、上海市重点商标保护企业、上海软件企业百强、上海市电子商务示范企业、上海版权示范单位、上海市生产性服务业先进示范企业、上海生产性服务业促进会理事单位、上海软件企业和信息技术服务业百强等多项荣誉资质称号。集团与复旦大学、上海大学、西安交通大学、华东师范大学、嘉兴学院、乌鲁木齐职业大学等知名院校建立了战略伙伴关系，分别成立了关于智能内容生成、全网舆情监测、大数据与新媒体、跨平台数据处理等不同课题的产学研合作，并与今日头条、阿里、腾讯、百度、Google、Yandex、Facebook等知名互联网平台建立了良好的官方合作伙伴关系。集团总部：上海市静安区江场路1401号 上海市大数据产业园6号楼 珍岛大厦,\n",
      "\n",
      "\n",
      "大数据开发工程师,2-2.5万/月,快速消费品(食品、饮料、化妆品),领聘（北京）企业管理有限公司,129329559,五险一金 专业培训 年终奖金 定期体检 员工旅游 补充医疗保险 周末双休 节日福利,https://jobs.51job.com/beijing-cpq/129329559.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,北京-昌平区 | 2年经验 | 大专 | 招3人\n",
      "大数据开发工程师,0.8-1.3万/月,计算机软件,武汉新创云图科技有限公司,117362324,一对一指导 通讯补贴 定期体检 年终奖金 五险一金 餐饮补贴 免费班车,https://jobs.51job.com/wuhan-dhxjs/117362324.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,武汉-东湖新技术产业开发区 | 1年经验 | 大专 | 招10人\n",
      "大数据工程师,0.8-2万/月,互联网/电子商务,广州后知后觉信息咨询有限公司,126673538,节日福利 团队有活力 企业文化好 绩效奖金 五险一金 年终奖金 专业培训 弹性工作,https://jobs.51job.com/guangzhou/126673538.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,广州 | 2年经验 | 大专 | 招1人,岗位职责：1、参与整个公司大数据系统与应用的设计、开发、维护，搭建基于Hadoop/Spark/Shark的大数据平台；2、负责数据架构设计及前端数据应用开发工作；3、针对具体的业务问题，规划、设计基于数据挖掘的解决方案，负责大数据的处理和分析工作；4、负责大数据平台展现层的研发工作；5、基于海量数据建立用户行为分析的模型任职要求：1、大专及以上学历，计算机等相关专业，有互联网分布式大数据挖掘、分析、数据仓库开发实施经验者优先；2、熟练JAVA开发，接触过JAVA开发大数据前端接口和界面；3、熟悉SqlServer/MongoDB/Redis/HDFS等常用数据库，有数据库设计、性能调优经验，具有相关应用开发经验及数据库规划能力；4、熟悉MySQL、Oracle或NoSQL数据库技术；5、熟练掌握MapReduce原理、对Hadoop、Hbase、Hive等主流云计算、大数据相关软件有充分的了解；6、熟悉Spark、SparkSQL、SparkStreaming等框架；7、具备高度的责任心，良好的沟通能力，逻辑思维能力强，技术钻研及团队合作精神。,员工圈-基于SAAS技术的员工社群这里有资深的劳动专家顾问为您解答各种劳动问题；有一群志同道合的小伙伴；有一个神秘的小树洞；有一个可以提问的劳动咨询公众号......   广州后知后觉信息咨询有限公司成立于2016年，一直专注劳动法普、推广和咨询，通过实用的案例分析、精彩的线上课堂，还有专家顾问解答各种劳动问题，致力帮助众多公司及广大员工认识和理解劳动法。   2017年基于SAAS技术，公司研发出系列劳动法产品及工具，“员圈”公众号得到广大员工及企业的喜爱和认可。,\n",
      "\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "医疗数据治理工程师（医疗大数据工程师）,1-1.5万/月,互联网/电子商务,深圳智慧医保科技有限公司,128738538,五险一金 年终奖金 股票期权 餐饮补贴,https://jobs.51job.com/shenzhen-nsq/128738538.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳-南山区 | 2年经验 | 本科 | 招1人\n",
      "大数据开发工程师,1.4-2万/月,通信/电信运营、增值服务,上海航动科技有限公司,127889148,做五休二 周末双休 带薪年假 五险一金 绩效奖金 全勤奖 节日福利 专业培训 通讯补贴 高温补贴,https://jobs.51job.com/shanghai-xhq/127889148.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-徐汇区 | 2年经验 | 本科 | 招1人,1.主要负责对公司开发完成的平台的开发任务;2.次要负责提供日常技术性问题排查及性能优化;3.参与软件系统设计，负责开发文档编写工作4.负责解决开发过程中的技术问题,统一代码风格、落实测试、验收代码质量；任职要求：1、全日制本科以上学历，精通Java或Python；2、熟悉Hadoop/Hive/Spark/Flink/HBase/Flume/Kafka/ElasticSearch/OLAP等大数据相关技术栈，能在项目上熟练部署及应用；3、熟悉数据仓库模型设计与ETL开发经验，掌握维度建模设计方法，具备海量数据处理经验；4、熟悉分布式系统的设计和应用，熟悉负载均衡、缓存和高可用机制的实现；5、对数据具有敏感性；,上海航动科技有限公司始创于2011年，以推动智能化、精准化、专业化的全业务语音/短信支撑平台为核心，致力于为广大用户实现大数据环境下的平台服务支撑，并提供现代无线通信、网络通信及应用领域前沿产品的研究开发。公司拥有基于NP-MFB平台系统全部自主知识产权（包括通信底层、CRM、软著等）及多方通信资质；近三年来，平均每年申报6个软件著作权。公司是中国领先的企业移动信息化服务提供商，拥有全国增值电信业务经营许可证（SP）、1069全国三网合一短消息接入代码、互联网信息服务增值电信业务经营许可证（ICP）、ISO9001质量管理体系认证等资源，与中国移动、中国联通、中国电信三大运营商有着良好的战略合作关系。截至2017年底，我们已经发展了近百万平台用户，目前正与包括三大运营商、阿里巴巴、阳光保险、福佑卡车、途牛网等企业及团队进行全面深入的合作，并积极开展其他城市的复制。我们的团队——富有活力的80、90后年轻团队，阳光拼搏，热情致力于语音平台的打造！我们的环境——地理条件优越，办公环境优雅，同事关系亲密融洽，周边环境便利，可尽情享受工作同步带来的愉悦体验；我们的产品——强大的短信/语音能力服务平台，开放API接口，为不同前向客户提供客服能力及技术支撑。公司福利：工资奖金：高于业内平均水平；社会保险：按国家规定缴交五险一金；员工年假：入职即可享受带薪年假，按国家规定享受年休假；员工生日：举办员工生日会，准备蛋糕礼物小惊喜；贴心茶点：下午茶时间，畅所欲言，来一场头脑风暴；定期培训：公司定期组织针对各种职位提供培训，让你的工作能力和技能不断成长；员工活动：不定期组织员工聚会、运动、旅游、娱乐、拓展等各种形式，户内和户外均有；奖励机制：公司年会公开投票选举优秀员工和点石之星，并发放奖金及奖品。公司有良好的晋升渠道，只要你肯努力，一定会站得更高！了解我们，加入我们，期待与你携手共进，共创美好未来！公司紧邻上海9号线桂林路站，上下班交通极为方便。,\n",
      "\n",
      "大数据开发工程师,1-1.5万/月,计算机软件,上海海鼎信息工程股份有限公司,127330938,,https://jobs.51job.com/shanghai-mhq/127330938.html?s=sou_sou_soulb&t=0,民营公司 | 500-1000人,上海-闵行区 | 2年经验 | 本科 | 招若干人\n",
      "大数据开发工程师,0.8-1.3万/月,计算机软件,武汉新创云图科技有限公司,117362324,一对一指导 通讯补贴 定期体检 年终奖金 五险一金 餐饮补贴 免费班车,https://jobs.51job.com/wuhan-dhxjs/117362324.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,武汉-东湖新技术产业开发区 | 1年经验 | 大专 | 招10人,工作地点：湖北省武汉市东湖新技术开发区花城大道软件新城,新创成立于2012年，目前公司拥有员工百余名，是一家以软件外包服务、IT运维服务为主的IT服务提供商，目前在武汉市建立了营销与服务网络，目标是成为武汉地区行业领域优秀的IT服务提供商。新创将“超越技术”作为公司的经营思想和品牌承诺。作为一家以软件技术为核心的公司，新创通过开放式创新、卓越运营管理、人力资源发展等战略的实施，全面构造公司的核心竞争力，创造客户和社会的价值，从而实现技术的价值。新创以软件技术为核心，通过软件与服务的结合，软件与制造的结合，技术与行业管理能力的结合，提供行业解决方案和产品工程解决方案以及相关产品与服务。面向行业客户，我们提供安全、可靠、高质量、易扩展的行业解决方案，帮助客户实现信息化管理***实践，以满足客户业务快速发展的不同需求。行业解决方案涵盖的领域包括：电信、电力、金融以及制造业与商贸流通业、医疗卫生、教育、交通等行业。在产品工程解决方案领域，新创开展合作，提供车载信息产品、数字家庭产品、移动终端和IT产品等嵌入式软件开发和服务。在自有品牌的产品工程方面，在医疗领域，我们开发并提供多种医疗产品。在服务领域，新创提供包括IT咨询服务、应用开发和维护、套装应用软件服务、专业测试及性能工程服务与本地化服务、IT基础设施服务、IT教育与培训、业务流程外包等服务业务。新创将“超越技术”作为公司的经营思想和品牌承诺。作为一家以软件技术为核心的公司，我们通过开放式创新、卓越运营管理、人力资源发展等战略的实施，全面构造公司的核心竞争力，创造客户和社会的价值，从而实现技术的价值。新创致力于成为最受社会、客户、投资者和员工尊敬的公司，并通过组织与过程的持续改进，领导力与员工竞争力的发展，联盟与开放式创新，使新创成为全球优秀的IT解决方案和服务供应商。,a)   熟悉基本的SQL语法，熟悉基本的数据查询，有一定的数据分析经验；\n",
      "\n",
      "大数据开发工程师,1-1.5万/月,计算机软件,北京思普科软件股份有限公司,127752782,五险一金 餐饮补贴 年终奖金 补充医疗保险,https://jobs.51job.com/beijing-hdq/127752782.html?s=sou_sou_soulb&t=0,民营公司 | 少于50人,北京-海淀区 | 2年经验 | 本科 | 招1人\n",
      "医疗数据治理工程师（医疗大数据工程师）,1-1.5万/月,互联网/电子商务,深圳智慧医保科技有限公司,128738538,五险一金 年终奖金 股票期权 餐饮补贴,https://jobs.51job.com/shenzhen-nsq/128738538.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳-南山区 | 2年经验 | 本科 | 招1人,医疗数据治理工程师（医疗大数据工程师）1.医疗、医药、医保等信息化公司，工作背景1年以上2.医疗、医保系统对接上线经验、二个项目3.有一定的数据挖掘ETl工作经验，2年以上4.与产品设计团队有良好的沟通能力强,深圳智慧医保科技有限公司，成立于2015年9月22日，公司总部位于深圳市南山科技园长虹科技大厦17楼。承担国家十二五863计划有关课题的研发和产业化任务，致力于数字化循证医学知识库研发的医疗健康创新型科技公司。公司2018年9月获得泰康保险集团A轮投资。公司做为十二五国家863项目“医学知识库与临床决策支持系统研发”主要承担单位，项目产业化***基地；公司主要业务提供以循证医学知识库为核心的医保合理支付、医疗质量管理、医疗健康大数据挖掘与决策支持、商保理赔及健康险产品设计等服务，公司基于循证医学知识库体系开发的医保合理支付、医疗质理管理类软件为用户取得良好的效益，获得市场的好评。,\n",
      "\n",
      "大数据工程师,0.7-1.5万/月,计算机软件,武汉汉思信息技术有限责任公司,77605961,五险一金 补充医疗保险 交通补贴 餐饮补贴 年终奖金 定期体检 过节福利 专业培训 员工旅游 生日福利,https://jobs.51job.com/wuhan-jxq/77605961.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,武汉-江夏区 | 2年经验 | 本科 | 招若干人\n",
      "大数据开发工程师,1-1.5万/月,计算机软件,北京思普科软件股份有限公司,127752782,五险一金 餐饮补贴 年终奖金 补充医疗保险,https://jobs.51job.com/beijing-hdq/127752782.html?s=sou_sou_soulb&t=0,民营公司 | 少于50人,北京-海淀区 | 2年经验 | 本科 | 招1人,1、负责大规模海量数据的清洗、特征提取、分析和挖掘工作；  2、负责海量日志的解析、过滤和入库程序的编写； 3、负责数据库的设计，SQL    存储过程开发和测试，及SQL查询的性能调优； 4、负责Hadoop集群生产环境搭建，性能调优和日常维护； 5、负责MapReduce程序的开发，Hive脚本的编写。  任职要求：1、 计算机软件或相关专业，本科或以上学历； 2、熟练使用Oracle、Mysql、PostgreSQL等，熟悉SQL编程； 3、熟悉Linux及Shell script的配置和使用 ；4、 熟练使用Java，对数据结构和算法有较好的掌握；5、熟练使用Linux、shell脚本的编写；6、熟悉Hadoop文件系统，熟悉MR编程，熟悉Hive，HBase，有相关调优经验；7、具有良好的逻辑思维能力，能够从海量数据中发现有价值的规律； 8、具有高度的工作责任感和团队合作精神，有良好的学习和沟通协调能力，能承受一定的工作压力；9、熟悉Hadoop； 10、有医疗项目相关工作经验者优先。,北京思普科软件股份有限公司是北京市批准的高新技术企业，位于中关村高科技园区，公司主要从事医疗、政府领域的信息化项目开发、销售、服务，具有十几年的市场积累。现有产品包括医院管理类、医师培养类、安防报警类、政府管理类、政府服务类等。公司坚持“立足国内，放眼世界”的发展方向，在“创新、诚信、严谨”的企业文化氛围内，遵循“让用户成功”的服务宗旨，努力为用户提供先进、可靠的产品与方便、快捷的服务。公司以具有世界跨国企业领导经验的高级管理人员为核心、年轻有为的专业人士为骨干、以先进的管理理念为宗旨，致力于国际化软件产品的研发与生产，为使中国成为东方的软件巨人而努力。,\n",
      "\n",
      "大数据开发工程师,1-1.5万/月,计算机服务(系统、数据服务、维修),深圳市德科信息技术有限公司,126836499,五险一金 员工旅游 专业培训 弹性工作 年终奖金 绩效奖金,https://jobs.51job.com/shanghai-pdxq/126836499.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,上海-浦东新区 | 2年经验 | 大专 | 招2人\n",
      "大数据开发工程师,1.2-2万/月,文字媒体/出版,新经典文化股份有限公司,128996752,五险一金 补充医疗保险 补充公积金 绩效奖金 弹性工作,https://jobs.51job.com/beijing-xcq/128996752.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,北京-西城区 | 2年经验 | 本科 | 招3人,>>岗位职责1、负责产品功能底层大数据开发，负责大数据清洗、存储、处理、分析等场景的开发；2、负责对数据模型、分布、传输等方面进行大数据场景的应用功能开发；3、负责公司大数据基础架构平台的运维，保障数据平台服务的稳定性和可用性；>>任职要求1、计算机相关专业本科以上学历，1年以上大数据相关经验；2、熟悉linux系统，熟练掌握JAVA或Python任意一种开发语言；3、了解大数据常见的处理工具，如Hadoop/Hive/Mapreduce/spark/storm等；4、熟悉大数据架构设计理论，熟悉行业常见的架构方案；5、热爱编程，有强烈的求知欲、好奇心和进取心，能承受一定工作压力；6、有Clickhouse应用经验者优先；,新经典文化股份有限公司，是一家以内容创意为核心的文化企业，主要业务包括图书策划与发行、数字图书、图书零售，以及影视剧策划等版权延伸业务，于2017年4月25日在上海证券交易所正式挂牌上市（股票代码：603096）。新经典先后与1400多位国内外知名作家，包括多位诺贝尔文学奖得主建立起良好且稳固的合作关系，期间推出了4000多部作品，塑造一批百万级畅销作品，拥有2亿人次以上的读者。新经典始终怀揣“更高飞翔、更宽视野、更完美自由体验”这一文化理想，致力于成为国际内容行业的领先者。,\n",
      "\n",
      "大数据开发工程师(ETL),0.9-2万/月,计算机软件,上海欣兆阳信息科技有限公司,130199754,五险一金 年终奖金 专业培训 定期体检 弹性工作 补充医疗保险 餐饮补贴,https://jobs.51job.com/beijing-cyq/130199754.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,北京-朝阳区 | 2年经验 | 本科 | 招1人\n",
      "大数据工程师,1-1.5万/月,互联网/电子商务,北京环宇数通科技有限公司,128023533,,https://jobs.51job.com/beijing-hdq/128023533.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,北京-海淀区 | 2年经验 | 本科 | 招2人,岗位职责：1.负责阿里云相关产品售后支持，并负责系统架构设计，建设规划；2.密切跟踪云计算、大数据的技术发展方向，设计和规划客户云计算解决方案；3. 售前支持与销售配合，负责云计算解决方案的推广；4.协助用户收集技术需求，进行售前技术分析支持工作;5.编写、修订和审核技术支持相关文档等。任职资格：1.本科以上学历，计算机相关专业，三年以上工作经验；2.有大型虚拟化、云计算平台项目售前、售后建设经验者优先考虑；3.熟悉常见厂商的服务器设备、网络设备、存储设备容灾系统、虚拟化、云计算技术原理；4.具有较强的商务谈判能力，良好的沟通协调能力，整合资源的能力等。,【环宇数通】中国领先的云服务商，专注于为企业级客户提供云计算、大数据、区块链和网络安全等技术咨询与方案建设服务。企业愿景：中国最具竞争力云服务商企业宗旨：助力企业安全数字化转型企业文化：精益求精、真诚守信、团结一心、勇于创新,\n",
      "\n",
      "大数据开发工程师（国泰君安）,1-1.5万/月,计算机软件,上海金仕达成括信息科技有限公司,129261626,五险一金 员工旅游 年终奖金 定期体检 专业培训 补充医疗保险,https://jobs.51job.com/shanghai-pdxq/129261626.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,上海-浦东新区 | 1年经验 | 本科 | 招若干人\n",
      "大数据开发,1-1.5万/月,计算机软件,上海海万信息科技股份有限公司,127410097,,https://jobs.51job.com/shenzhen/127410097.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳 | 2年经验 | 大专 | 招2人,岗位要求：1、2年以上大数据相关工作经验；2、java或scala技术基础扎实；3、精通Hadoop大数据平台框架，精通HDFS系统原理，熟练Flink、Spark、Hive、HBase、Impala等组件的应用；4、熟悉关系型数据库(Oracle\\Mysql\\Postgresql），可熟练编写SQL语句及存储过程，了解SQL性能调优；5、有过海量数据系统开发、大数据程序性能调优经验者优先；6、思维严谨，工作主动，责任心强，具有良好的沟通、协作能力和团队合作意识。,上海海万信息科技股份有限公司是为基金、证券、银行、保险、期货等金融行业提供核心 软件研发、实施和服务的高科技企业。公司拥有经验丰富的行业技术专家组成的研发、实施团队，该团队长期从事证券、基金、 银行等行业信息系统的建设与开发，不仅掌握了最前沿的业务知识，也充分了解国内企业的 现状及需求。海万科技立足于上海，在深圳等地设立有分公司。公司的软件产品包括注册过户系统、销售系统、证券管理人清算系统、电子商务平台、 基金数据中心、客户关系管理系统、呼叫中心系统等，也为国内外金融机构提供专业的软件 外包服务。公司从成立之初进入国内证券基金行业，在很短的时间内业务规模迅速扩大，业务模式 也丰富了很多，逐渐形成行业内围绕运营业务的全面解决方案提供商，同时以公司核心能力 所延伸出的项目管理能力，面向国内外金融企业提供金融企业核心业务流程重组的咨询与技 术服务、金融业务运营咨询服务、金融领域的业务流程及信息技术外包服务，能够为客户提 供包括业务与技术战略，组织架构设计，应用系统实施，网络基础设施建设，系统集成和管 理外包服务在内的、覆盖整条服务价值链的全方位服务。,\n",
      "\n",
      "大数据开发工程师,1-2万/月,计算机软件,深圳市拓保软件有限公司,124931533,,https://jobs.51job.com/shenzhen/124931533.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,深圳 | 2年经验 | 大专 | 招50人\n",
      "大数据开发工程师（国泰君安）,1-1.5万/月,计算机软件,上海金仕达成括信息科技有限公司,129261626,五险一金 员工旅游 年终奖金 定期体检 专业培训 补充医疗保险,https://jobs.51job.com/shanghai-pdxq/129261626.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,上海-浦东新区 | 1年经验 | 本科 | 招若干人,1.参与流计算框架开发2.参与基于Hadopp/Spark/Flink的流/批大数据应用开发3.参与统一接口开发4.大数据平台监控系统开发1.计算机相关专业本科及以上学历；2.较好的沟通理解能力，较强的逻辑思维能力，态度踏实，积极上进；3.熟练掌握java语言，同时熟悉Scala者优先；4.精通Hadoop/Spark/Flink，熟悉ElasticSearch、Kylin、Redis中至少一种，有Hadoop、Spark、Flink和hive相关项目经验（高级至少两年）；,金仕达（包括上海金仕达成括信息科技有限公司、上海金仕达软件科技有限公司及其他控股公司）是国内出色的金融科技服务商，通过洞察行业前沿的业务场景，应用行业先进的技术体系，为行业大型金融机构客户提供专业化金融科技整体解决方案。       金仕达成立于1996年，总部位于上海，在北京、深圳设有分公司，在武汉设有研发中心，目前拥有800逾名研发人员。公司贯彻以“为客户创造价值，为员工创造平台，为中国金融发展提供动力”的理念，在中平资本持续资源的投入下，近两年团队规模和质量快速提升，吸引了来自于世界五百强、大型互联网公司多名高端人才。有大量来自于985及海外名校的优秀毕业生，经过专业化的培养和富有挑战性的选拔激励机制，成为公司具有较强战斗力的生力军。金仕达凭借二十多年对中国市场的深刻理解及丰富的行业经验积累，并结合国际先进的专业化业务理念，将大数据、人工智能、云计算、区块链等技术应用到金融行业各业务场景，为其提供了包括证券、期货、黄金、固定收益等全业务交易管理及衍生品交易平台，在合规与风险管理领域产品优势明显。公司内部设立了金融科技研究院，旨在专注于全球金融科技变革，擎领行业战略创新势能，全面提升客户价值创造水平。在金融技术领域，公司已经形成了在行业前沿的新一代分布式交易平台(DTP)、微服务开发平台(KSP)和大数据架构平台。       金仕达拥有包括交易所、银行、保险、证券、期货、基金等近400家优质的金融机构客户。合作的客户中包含了7家***大型交易所和清算所；80多家证券公司客（包含前10大证券公司中的9家）；77家期货公公司（包含前5大期货经纪公司）；90家黄金交易客户（包含前9大银行客户）；以及JPMorgan、陆金所、外贸信托等其他金融机构。除金融机构外，金仕达通过为大型实体企业提供先进的衍生品交易和风险管理平台，帮助其严控风险、规范操作，以金融技术服务于实体经济。公司管理文化追求简单高效，激励机制灵活，为员工创造了良好的发展平台。公司设立M(管理)、T(技术)、P(业务)三大晋升通道，为每一位加入金仕达的同学量身定制发展路线和职业导师，为表现优秀的员工提供了后备干部的选拔机会，为优秀的毕业生提供了管培生的计划。公司同时设有股权激励机制，为表现优秀的核心骨干提供成为“金仕达合伙人”的机会。另外，公司除了为员工提供全额的社保福利，还为每一位员工购买了额外的商业保险，保障员工身心健康安全。公司工会为员工提供了较多的福利，办公场所设有健身房、图书馆、休闲活动吧、休闲露台等娱乐生活设施，已经建立了羽毛球、篮球、足球、瑜伽、舞蹈、徒步等多个俱乐部，使员工业余活动丰富。      来吧，与我们一起，筑梦中国金融科技新未来！“金仕达”期待您的加入！,5.熟悉redHat或者centOS操作系统，具有shell开发能力。\n",
      "\n",
      "大数据开发工程师,1.2-2万/月,计算机软件,深圳市达博威科技有限公司,119703312,做五休二 周末双休 五险一金 全勤奖 节日福利 员工旅游,https://jobs.51job.com/shenzhen-ftq/119703312.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳-福田区 | 2年经验 | 本科 | 招5人\n",
      "大数据开发工程师,1.2-2万/月,计算机软件,深圳市达博威科技有限公司,119703312,做五休二 周末双休 五险一金 全勤奖 节日福利 员工旅游,https://jobs.51job.com/shenzhen-ftq/119703312.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳-福田区 | 2年经验 | 本科 | 招5人,岗位要求： 1、熟悉Hadoop、数据仓库理论，具备大数据BI项目经验; 2、熟练使用关系数据库，如Oracle，PostgreSQL等; 3、熟练使用Shell、Hql、具备一定的性能调优能力; 4、熟练使用至少一种编程语言Java、Python、Scala语言; 5、具备良好的设计和编码规范; 6、具备良好的沟通能力、高度的责任心和团队合作精神; 7、具备良好的抗压、分析和解决问题能力。,达博威科技成立于2015年，主要为保险、银行、高科技创新等行业的优秀企业提供IT服务。业务范围涵盖了IT规划及解决方案咨询、软件产品开发及实施、系统运维支持服务等。在深刻理解客户需求的前提下，从方案策划、软件实施和运维支持三个方面提供全方位服务，提供多种应用软件产品和应用解决方案，为客户沟通功能齐全、管理先进的信息管理系统。  达博威视人才为企业之根本，重视人才素质和专业技能的提升，不断培养德才兼备的专业化人才，致力打造学习型团队。我们求贤若渴，我们为您提供施展抱负的舞台。欢迎各专业优秀人才加入达博威，实现自我价值，共享企业发展成果！达博威福利待遇：1. 五天8小时工作制；2. 依国家规定享受法定节假日；3. 享受5-15天的带薪年休假；4. 公司为每位同事购买社会保险及住房公积金（简称五险一金）；5. 股权激励、司龄奖、年度优秀同事评选、年度优秀团队等；6. 提供内、外培训机会，以及公平、开放的个人晋升机会；7. 提供具有竞争力的薪酬；8. 其他福利：生日会、下午茶、节假日礼品、团建活动等。欢迎各方人才加入达博威，一经录用，您将获得良好的薪酬及发展平台！深圳总部地址：深圳市福田区泰然七路苍松大厦电话：0755-82562046,\n",
      "\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "大数据开发工程师,1.5-2万/月,计算机软件,明源云,126812131,六险一金 定期体检 周末双休 通讯补贴 年终奖金 弹性工作,https://jobs.51job.com/wuhan/126812131.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,武汉 | 1年经验 | 大专 | 招2人\n",
      "大数据开发工程师-GZ,1.2-1.8万/月,互联网/电子商务,北京深演智能科技股份有限公司,128738166,周末双休 节日福利 岗位晋升 五险一金 补充医疗保险 定期体检,https://jobs.51job.com/guangzhou/128738166.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,广州 | 2年经验 | 本科 | 招若干人,工作职责:1、基于深演云平台（包括不限于Hadoop、Spark、Hbase、Kafka、Flink、Druid、AKKA等框架），参与各产品线的开发和优化；2、参与人工智能算法在大数据平台的工程化、产品化工作；3、通过数据分析和数据挖掘，支撑精细化运营及决策。任职资格:1、教育背景：- 计算机相关专业，本科及以上学历；2、经验背景：- 2年左右大数据相关经验，有To B数据产品相关经验更佳；3、岗位能力：- 熟悉Scala、Python、Java中任意一种；- 必备Hadoop生态大数据研发经验；- 良好的编程基础和数据结构基础，熟悉算法，机器学习的有加分；4、软性能力：- 优秀的学习能力和抗压能力，具备良好的团队意识，积极主动。,深演智能由品友互动发展而来。2019年8月，“品友互动”品牌升级为“深演智能”，“品友”成为深演智能旗下专注于营销技术领域的业务品牌。深演智能作为国内领先的一站式人工智能决策解决方案平台，致力于通过人、信息和决策场景的智慧连接，让人工智能真正赋能决策者，助力企业与社会数字化、智能化。深演智能立足于机器学习算法和大数据技术，拥有全球领先的数据挖掘和机器学习算法科研团队，凭借强大、安全、可靠的决策和数据处理能力树立行业标杆。公司基于十多年来AI技术和行业经验沉淀，自主研发独有标识拉通和深度用户画像技术，行业知识图谱技术等，打造基于海量数据的决策AI引擎“福尔摩斯”，打通认知-感知-决策，赋能营销、政务、金融等多决策场景。深演智能专注于AI技术的落地应用，提供多决策场景的AI解决方案。目前，深演智能在北京、上海、广州、香港以及海外的西雅图、新加坡、伦敦等地设有办公室（截至2019年8月），为超过2000家国内外知名企业提供智能服务；为汽车、制造、医药、零售、通信等行业提供AI解决方案；宝洁、通用、携程、国航、苏宁等超过90%的世界500强企业是深演智能的标杆客户。深演智能不断深化AI+数据双轮驱动的技术生态建设，通过CBC宽带资本、北广文资歌华基金、中移创新等资本或战略合作方式，构建运营商在内的数据合作伙伴生态。同时作为中国人工智能产业发展联盟（AIIA）、中国人工智能学会、人工智能产业创新联盟等权威人工智能组织机构成员，共同推进人工智能相关的行业规则制定，获“2019年中国最具商业价值AI企业百强”、“中国人工智能商业落地100强榜单”等权威榜单认可。【管理团队】黄晓南（Founder/CEO）黄晓南，品友互动创始人兼CEO，毕业于北京大学法学、英语专业，随后就读加州大学洛杉矶分校获得MBA硕士学位。全面负责品友互动的战略规划和运营管理，是最早引入行为定向，实时竞价广告和DSP概念到中国市场的品牌营销专家，曾任职于美国宝洁集团市场部负责品牌营销工作，有着丰富的品牌及市场营销经验，其后在世界***咨询公司麦肯锡，为诸多世界一流企业进行营销战略咨询。谢鹏（Co-Founder/COO）谢鹏，品友互动联合创始人兼COO，毕业于北京大学法学硕士，随后就读于中欧国际工商学院EMBA。基于消费者行为分析的精准营销专家，擅长整合技术创新与传统商业解决方案。在消费品行业和互联网行业具有多年创新营销解决方案推广经验，曾担任知名零售数据定向营销公司总经理；Fedex-Kinkos总经理；宝洁、庄臣、人头马等众多跨国公司的品牌终端营销渠道总监等职位。欧阳辰 （CTO）欧阳辰是大数据技术和人工智能领域的行业专家，曾就职于小米，微软和甲骨文等领先技术公司，并负责过搜索引擎，广告平台和大数据平台的核心研发和管理职务。加入品友互动之前，他曾在小米商业化部门负责机器学习、大数据平台和架构演化，支持广告业务一年内实现数十倍的流量增长和超高速的收入增长，他利用深度学习技术，在用户画像、人群扩展和意图分析等方面都获得了重大技术突破，显著提升营销效果。在微软任职期间，欧阳辰领导团队参与搜索引擎的核心检索模块的研发工作，提升超过30%的索引效率;另外，他还曾负责微软移动上下文广告的算法和系统，利用NLP技术提升上下文分析的准确性，大大提升广告投放效果，他还推出移动原生广告系统。欧阳辰也是国内将区块链技术和大数据营销结合的前驱者，拥有多项广告技术专利，并且著有《Druid大数据实时分析》一书。叶正华（President of International Business）叶正华，美国University of Texas at Austin的广告学博士和工商管理学硕士学位，曾获选Campaign Asia A-list行业奖项，任教于中国传媒大学，也曾是clickz的受聘作者。在电通安吉斯集团iProspect和Amnet任中国区首席执行官，全面负责电通安吉斯旗下搜索营销及程序化购买的所有业务及团队运营。在埃培智集团盟博受众平台中国区任总裁，领导盟博受众平台所属移动，搜索，社交及程序化购买四个事业部。在WPP集团旗下群邑任搜索董事总经理，负责群邑集团四家广告公司包括Mindshare, Mediacom, Maxus 和MEC所有客户的搜索营销业务运营和团队管理。在谷歌美国和谷歌中国工作四年，负责AdWords中国在线销售和大客户销售的产品营销。拥有超过18年广泛的媒体技术，市场营销和广告经验。官网：***************【关于我们】大咖AI领军企业助阵品友AI大会： ************************/s/uz8YYunDcbYFVNcMRywPjA品友互动斩获IAI国际广告奖：************************/s/KMP9u7x0OmhpVSpHfnXSSA品友互动揽获金远奖案例金奖及“CMO最信赖的AI合作伙伴”等五项大奖：************************/s/lG4_-N_-7oJOETdsfrT6Zg品友互动谢鹏：MIP赋能商业决策解决CMO核心难题：************************/s/hhcu5y4pwSjyJD0XP_ckYA品友互动黄晓南：让人工智能成为企业普惠科技：************************/s/pcVLn4Y_PgSSz6xZvOFt2wDMP是营销策略的输出，赋能商业决策：************************/s/bud5lYLfT_dEFSo6CvQNHA品友互动入榜2018年人工智能行业创新企业top20：************************/s/UHP3LPsz21wlNG9MSWEVxg品友互动作为航旅峰会***受邀AI企业 MIP解决行业决策痛点：************************/s/BSHva2tRmQzJvgw6y5CcGACTO欧阳辰谈AI赋能商业决策：************************/s/BTpIG5velEfzcqZfaMveyg品友互动AI战略升级 赋能品牌营销智能决策：************************/s/mWtFjKTm5ywgGJ1MowzPag2018品友互动人工智能大会：上************************/s/Gd2nj5WuLZKD17f_Yh8MqQ，下************************/s/lepn04dwl1dbk1sa-_FFuw品友人在这里，360°真实写照，独家出品，欢迎围观~1.《梦想始于品友》：看我们的成长 ***************/page/d/q/o/d0312ci7uqo.html2.《梦想的地方》：看我们的梦想 ***************/page/r/c/y/r01853bg0cy.html3. 品友人才观：*********************/jq/9262150.aspx,\n",
      "\n",
      "大数据开发工程师,0.8-1.5万/月,计算机软件,广州海颐软件有限公司,121048493,五险一金 员工旅游 餐饮补贴 专业培训 绩效奖金 定期体检 考证奖励 生日贺礼,https://jobs.51job.com/guangzhou/121048493.html?s=sou_sou_soulb&t=0,民营公司 | 500-1000人,广州 | 1年经验 | 本科 | 招5人\n",
      "大数据开发工程师,2-2.5万/月,快速消费品(食品、饮料、化妆品),领聘（北京）企业管理有限公司,129329559,五险一金 专业培训 年终奖金 定期体检 员工旅游 补充医疗保险 周末双休 节日福利,https://jobs.51job.com/beijing-cpq/129329559.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,北京-昌平区 | 2年经验 | 大专 | 招3人,1、参与项目需求分析、软件架构设计； 2、负责大型软件开发项目中的数据库设计、开发和性能优化工作； 3、构建数据处理、分析平台，搭建、开发相关后台服务； 4、实现各类数据挖掘算法，根据实际运行情况做算法优化。  任职要求：1．对军工科研领域工作感兴趣，踏实，稳重，关注大数据技术发展趋势，有一定科研能力和英文文献阅读能力。 2、计算机/通信等相关专业，本科及以上学历，有较好的理论基础和快速的学习能力； 3、熟练掌握TensorFlow，Caffe等社区开源工具与框架中的一种及以上，对新技术敏感，具有良好的系统分析、架构设计能力； 4、精通java/python编程语言，熟练掌握常用的数据结构和算法； 5、有丰富的数据挖掘系统编程经验，对常用的机器学习/深度学习算法有深入理解； 6、有大数据实际项目技术开发经验（hadoop,druid.io ,storm,spark，elasticsearch等)优先； 7、熟悉Linux/unix操作系统,能针对所使用的大数据框架对系统参数进行调优； 8、熟悉linux/UNIX shell、熟悉(Perl/python / shell)任意一种脚本语言。,公司成立于2015年，中医传承几千年，中国中医传统的“药食同源”养生智慧和思想即是食物保健思想的反映，包含着中医药学中的食疗、养生保健和药膳等内涵；中国古人提出的“上工治未病，不治已病”，因此经过多年的打造，“禄佰年”品牌应传承药食同源中医文化于2018年初诞生，并作为公司今后的主要品牌。        公司健康花茶系列---金银花茶、贡菊茶、牛蒡根茶；水系列--金银花水；        公司获得315诚信企业认证，产品通过了国家权威机构检测合格，被认定为国内AAA级信用单位；        公司旗下多款产品获得中国人民财产保险股份有限公司的承保，为所有消费者护航；同时公司申请ISO9001质量体系认证，为消费者的护航加一层保护；        2019年公司成立专业的直播团队，为合格的、健康的、有质量认证的产品进行直播销售、广告宣传，将健康、珍爱的理念不停的传递下去。        欢迎有意向的应届毕业生和实习生加入，欢迎各界朋友的加入！,\n",
      "\n",
      "大数据开发工程师,1-1.8万/月,计算机软件,广州安正软件有限公司,129081128,,https://jobs.51job.com/shenzhen/129081128.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳 | 2年经验 | 本科 | 招2人\n",
      "大数据开发工程师,0.8-1.5万/月,计算机软件,广州海颐软件有限公司,121048493,五险一金 员工旅游 餐饮补贴 专业培训 绩效奖金 定期体检 考证奖励 生日贺礼,https://jobs.51job.com/guangzhou/121048493.html?s=sou_sou_soulb&t=0,民营公司 | 500-1000人,广州 | 1年经验 | 本科 | 招5人,岗位职责：1、根据组长或上级要求和安排，开展项目开发技术支持工作；2、参与大数据基础架构和技术体系的规划与相关产品技术预研。3、能根据工作需要完成各类项目文档的编写；4、能够与客户进行有效的沟通，和其它团队成员良好的合作；任职要求：1、本科或以上学历，计算机、统计、数学等相关专业毕业；2、熟悉Hadoop、Hive、Hbase、Flink等大数据组件，有一年以上大数据业务开发经验；3、精通JAVA/Scala至少一种编程语言，熟悉Spark开发优先；4,熟悉使用SQL/SAS,熟悉至少一种数据库软件,如oracle,MySQL等,具备一定的数据库性能优化技能；5、熟悉逻辑回归、文本算法、排序、分类等机器学习的算法与运用6、熟悉Linux环境，能完成Linux环境下的上线运维及问题排查等日常工作；7、有较强的逻辑思维和沟通交流能力,抗压能力强,,广州海颐软件有限公司前身为烟台海颐软件股份有限公司广州分公司，成立于2003年12月，并于2013年8月独立为广州海颐软件有限公司，注册资金2000万，在广西、云南、海南、贵州、新疆均设有办事处，是华南地区***的电力软件服务商之一。2020年12月24日，广州海颐软件有限公司引入了战略投资者-南方电网数字电网研究院有限公司，顺利完成增资扩股工作，公司注册资本由2000万元增加到5000万。目前在巩固南方电网等行业客户的基础上，大力发展自来水、燃气、公安、司法、交通等行业信息化解决方案。公司一直以来专注于为华南地区电力行业、政府行业和大型企业提供管理软件开发、实施与咨询服务，是规模化软件企业。广州海颐致力于成为中国软件行业的佼佼者，自成立以来营业收入和利润保持30%的年均增长率，2018年软件销售合同额达到2.5亿元,已通过CMMI L3认证。  公司坐落于环境优美的广州科学城，拥有自主产权的办公场所，目前在职员工400余人，其中本科及以上学历超过90%，是一个年轻、充满活力的知识型团队。   母公司海颐软件总部位于山东省烟台市，已于2015年4月20日在新三板挂牌，是国内首批通过CMMI5认证的软件企业,现有四十余项软件著作权和软件产品认定,是国内电力及公安信息化领域知名的软件服务商。海颐软件隶属于东方电子，东方电子是一个集科研开发、生产经营、技术服务、系统集成于一体的国有大型高新技术企业集团，东方电子股份有限公司为深交所上市公司（股票代码：000682，A股）。欢迎您加盟海颐软件，希望您伴随海颐的繁荣而获得个人的职业发展及事业成功！【公司福利】     在提供优厚的薪金之外，公司还为员工提供一系列的福利计划，为员工的生活和工作提供良好的个人空间和安全保障。以下是公司提供的福利：       ① 五天工作制，国家法定节假日，带薪年假。     ② 购买社保、住房公积金。     ③ 年度体检、公司年度旅游、部门定期旅游等。     ④ 年终绩效奖金     ⑤ 本地化补贴、自购笔记本电脑补贴等。     ⑥ 结婚贺礼、生育贺礼、生日贺礼、过节礼品等。  【职业晋升】     公司为员工提供良好的职业晋升通道：    管理路线：普通员工—项目主管—项目经理—区域经理—项目总监    技术路线：普通员工—技术骨干—系统设计师—系统架构师—行业专家    公司非常注意员工的成长，为员工提供体系化的培训和自我提升支持：    ① 培训体系：新进人员培训、专业技能类培训、综合素质培训、管理类培训、外部培训和进修。    ② 培训形式：内部培训、外派训练、在职进修。公司地址：广州市黄埔区（萝岗）科学大道中99号科汇金谷科汇四街10号5楼（即建设银行隔壁）最近公交站：“广东软件园站”或“科学信息大厦站”或“科珠路（科研路口）站”乘车方式：  1、地铁4号线黄村地铁下，可乘B4A、574、578、B22、448至“广东软件园站”或“科学信息大厦站”。           2、地铁6号线金峰站下，可乘 336、325、高峰快线63到“科珠路（科研路口）站”。           3、地铁21号线神舟路站B出口下，走大概10分钟到天桥处，旁边即是科汇金谷。,\n",
      "\n",
      "大数据开发工程师,1.2-2.5万/月,计算机软件,南京翼海云峰软件技术有限公司,127948274,五险一金 定期体检 年终奖金 交通补贴 绩效奖金,https://jobs.51job.com/shenzhen-lgq/127948274.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳-龙岗区 | 2年经验 | 本科 | 招5人\n",
      "大数据开发工程师,1.2-2.5万/月,计算机软件,南京翼海云峰软件技术有限公司,127948274,五险一金 定期体检 年终奖金 交通补贴 绩效奖金,https://jobs.51job.com/shenzhen-lgq/127948274.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳-龙岗区 | 2年经验 | 本科 | 招5人,岗位要求1.统招全日制本科及以上学历，2年HiveSQL相关项目开发经验；2.熟悉hive/mysql/oracle；3.精通SQL语言、存储过程以及相关SQL优化；4.熟悉hadoop数据采集、ODS/DW数据仓库技术，ETL工具、以及数据仓库建模者优先；5.具备良好的逻辑分析能力、组织沟通能力和团队精神；6.有FineReport/Tableau工具经验者优先。,公司成立的时间：2014年成立，注册地点：深圳。我司旗下有3家子公司：深圳公司:主要是为中国移动和中国电信提供大数据治理服务(数据采集、数据治理、数据分析)； 武汉公司：文本识别、图像识别、知识图谱等机器学习； 南京公司：主要是为华为大数据平台提供数据治理、数据分析、数据标注等服务。,\n",
      "\n",
      "JAVA工程师(大数据),0.8-1.5万/月,计算机软件,立得空间信息技术股份有限公司,113693331,五险一金 补充医疗保险 专业培训 年终奖金 弹性工作 免费班车 餐饮补贴 定期体检 周末双休,https://jobs.51job.com/wuhan/113693331.html?s=sou_sou_soulb&t=0,民营公司 | 500-1000人,武汉 | 2年经验 | 本科 | 招1人\n",
      "JAVA工程师(大数据),0.8-1.5万/月,计算机软件,立得空间信息技术股份有限公司,113693331,五险一金 补充医疗保险 专业培训 年终奖金 弹性工作 免费班车 餐饮补贴 定期体检 周末双休,https://jobs.51job.com/wuhan/113693331.html?s=sou_sou_soulb&t=0,民营公司 | 500-1000人,武汉 | 2年经验 | 本科 | 招1人,1、负责产品功能模块的详细设计和开发；2、参与核心技术研究。任职要求：1、计算机相关专业本科及以上学历，熟悉面向对象理论，有2年或以上java项目开发经验；2、熟悉面向对象编程技术，思维清晰敏捷，逻辑分析能力强； 3、熟悉大规模数据处理、分布式计算等相关技术，如Hadoop 、Hive、Spark、MapReduce、MongoDB等；4、熟悉Spring、SpringMVC、mybatis等开源框架；5、精通Restful+Webservice开发；6、熟练掌握Jsp、Javabean、Servlet、html、dhtml、xml、css 、ajax、Javascript、JQuery等网页开发技术； 7、熟悉和掌握MPP数据库，如postgresql-xl，对常见的数据库Sql编程、性能优化能较好的掌握；8、熟悉Jetty、tomcat等应用服务器配置及应用部署、开发；9、熟悉Linux环境的一般操作；10、有良好的编程风格，有基于成熟框架完成应用系统开发经验者优先；11、有GIS开发经验或海量GIS数据存储者优先；12、地理或测绘专业可降低要求。,立得空间（*****************）立得空间信息技术股份有限公司（以下简称：立得空间）成立于1999年9月，是由武汉大学、两院院士李德仁、国内知名科技投资公司等共同组建的高科技企业，注册资金约10985万元，现有员工500余人，在北京、广州、深圳、芜湖等地设有分支机构。立得空间的主营业务由移动测量、智慧城市大数据及行业应用、智能机器（机器人&自动驾驶）三大板块鼎足而成。立得空间是中国移动测量系统（MMS：Mobile MappingSystem）的发明人及世界领先企业，我们致力于运用“天-空-地”移动测量技术推动测绘产业变革，促进地理空间大数据的快速获取与利用。立得空间拥有一支200多人，由多方面专业人才组成的研发队伍，研发能力涵盖机械、电子、自动控制、测绘、人工智能（AI）、云计算、互联网、大数据等诸多领域，具备优异的“跨界”科研能力和复杂系统集成能力，是世界移动测量界最具实力的创新团队。我们一直秉承“坚持原创，追求领先”的经营理念，不断创造令客户惊喜的科技体验。迄今为止，立得空间已拥有数十项专利及著作权，曾2次荣获国家科技进步二等奖以及各种部级奖励20余项，参加了移动测量、实景地图、时空信息云平台等国家标准和行业标准的编制。立得空间不但一直引领移动测量、惯性导航、高精度地图、时空大数据等技术的发展潮流，更通过应用与商业模式创新，在智慧城市运营中心，城市管理、公安、测绘、交通、旅游等行业应用，车联网、机器人&自动驾驶，物联网高精度位置服务等领域开辟了崭新的应用模式。20年来，我们已成功服务全国600多个城市、数以千计的客户，在北京奥运会、国庆阅兵、汶川地震救援、青藏铁路、嫦娥号飞船探月等国家重大活动或项目中，我们的技术产品都发挥了重要作用。创新无止境，经典在继续。立得人将践行一贯的承诺，为您奉献“立刻得到”的价值！公司福利宇宙超强的福利保障“六险二金”（养老、医疗、失业、工伤、生育、商业保险，即“六险”+住房公积金、特需医疗金即“二金”）超越同行的福利水平（超越同行的工资+各种贴心的福利：上下班公司免费班车接送、八小时工作制、每天公司食堂丰富美味午餐、新鲜水果免费供应、公司宿舍+每年一次员工体检、还有各种福利金、贺礼+各种玩乐Party…省略一万）；人文激励导向（奖励忠诚奉献，奖励价值贡献）级正立得范儿（正直 团结 开放 创新）跟有意思的人一起干有意思的事情，加入Leador，Leador ，因你而精彩！公司网站：************************地   址：武汉市东湖新技术开发区汤逊湖北路33号华工科技园·创新基地12栋邮    编：430223,\n",
      "\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "大数据开发工程师,1.2-2万/月,互联网/电子商务,深圳市华宇讯科技有限公司,130892925,员工旅游 定期体检 弹性工作 六险一金 7.5小时制 年终奖金 周末双休,https://jobs.51job.com/shenzhen/130892925.html?s=sou_sou_soulb&t=0,民营公司 | 500-1000人,深圳 | 2年经验 | 本科 | 招1人\n",
      "大数据开发工程师,1.2-2万/月,互联网/电子商务,深圳市华宇讯科技有限公司,130892925,员工旅游 定期体检 弹性工作 六险一金 7.5小时制 年终奖金 周末双休,https://jobs.51job.com/shenzhen/130892925.html?s=sou_sou_soulb&t=0,民营公司 | 500-1000人,深圳 | 2年经验 | 本科 | 招1人,岗位职责：1、负责推荐系统用户画像的开发；2、负责大数据的ETL、数据挖掘。任职要求：1、本科以上学历，计算机相关专业，2年及以上相关工作经验；2、有扎实的计算机理论基础和编程经验，熟练Scala，Java/Python(至少一种)，shell程序开发，熟悉Linux/Unix开发环境；3、熟练使用Sprak、Storm、Hadoop、Kafka等大数据开发并擅长性能调优，深入理解MapReduce；4、熟练使用Hbase、hive、Flume、sqoop/canal等工具；5、具有Spark、Mlib算法使用经验优先；6、有推荐系统大数据开发、数据挖掘经验优先。,华宇讯科技成立于2004年，是一家以“互联网+”福利为主营方向的国家高新技术企业。华宇讯科技旗下拥有三大核心品牌，其中“卖座网”是国内知名的电影在线服务提供商，专为机构客户提供员工福利、礼品馈赠、营销推广等各类“电影+” 应用解决方案；“苏打生活”是国内领先的生活福利解决方案提供商，专为机构客户及其员工提供电影文娱、生日/节令关怀、健康生活、旅游团建、学习成长等一站式生活福利服务；“淘福客”是以丰富的供应链服务为基础，帮助福利服务及营销服务企业升级为高效互联网平台公司的一站式解决方案提供商。华宇讯科技目前拥有800多人的服务团队，业务覆盖全国400多个城市，在北京、上海、广州、深圳、重庆、成都、武汉、长沙、南京、天津、沈阳、南宁等城市设立专业团队提供本地化服务，已服务机构客户超过50000家，用户规模超5000万。 更多精彩内容，请关注公众号“华宇讯”!,\n",
      "\n",
      "运营商BU-大数据开发（数仓方向）-广州,1.2-1.5万/月,计算机软件,广州市讯飞樽鸿信息技术有限公司,130586096,五险一金 员工旅游 定期体检 交通补贴 补充医疗保险 餐饮补贴 通讯补贴 绩效奖金,https://jobs.51job.com/guangzhou-thq/130586096.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,广州-天河区 | 1年经验 | 大专 | 招1人\n",
      "大数据开发工程师(ETL),0.9-2万/月,计算机软件,上海欣兆阳信息科技有限公司,130199754,五险一金 年终奖金 专业培训 定期体检 弹性工作 补充医疗保险 餐饮补贴,https://jobs.51job.com/beijing-cyq/130199754.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,北京-朝阳区 | 2年经验 | 本科 | 招1人,岗位职责：1.      参与支持hadoop、mpp类大数据平台或数据仓库实施项目，负责技术验证、架构设计、ETL代码开发工作；2.      参与支持大数据平台、数据仓库等售前方案编写、POC技术验证等工作；3.      参与金融行业Hadoop大数据平台架构设计和软件技术选型方案研究及相关标准制定等工作；4.      研究大数据技术发展动态，研究新型计算框架，并能够提出优化解决方案。职位要求：1.      熟悉银行数据结构，有银行经验优先考虑；2.      本科及以上学历，具备2年以上大数据，ETL相关工作经验；3.      熟练掌握SQL及linux shell开发技能；熟练主流关系数据库中的一种（如Oracle、MySQL、PostgreSQL）；4.      熟悉Hadoop，熟练掌握HDFS、HBase、Hive、Spark等开发技能，并具备2年以上开发经验；5.      强烈责任心，善于协作，具有团队合作精神。,营销实验室Convertlab（上海欣兆阳信息科技有限公司）为企业提供创新的数字营销平台DM Hub。DM Hub允许企业的数字营销部门在一个开放集成的平台上发掘、培育和连接客户，大幅提升各项转化率。DM Hub首先打通企业的营销触点进行数据采集和处理，针对不同触点提供相应的内容交互能力，从而允许企业对客户旅程进行个性化设计和自动化执行，并通过实时的数据分析形成营销闭环。营销实验室Convert lab由前SAP的SaaS产品事业部核心团队于2015年7月28日创立。团队成员主要来自SAP，Microsoft，IBM，Oracle等公司。具备SaaS产品研发，大数据应用，客户和渠道运营，企业服务等领域的丰富经验。福利：弹性工作制全体员工享受商业保险每年一次全员深度体检节日礼物、生日会都不缺公司集体旅游年年有，小团队聚餐月月有..,\n",
      "\n",
      "大数据专员,6-8千/月,计算机软件,库学科技（河北）有限公司,127858826,五险一金 餐饮补贴 通讯补贴 专业培训 出国机会 定期体检 弹性工作 股票期权 年终奖金 绩效奖金,https://jobs.51job.com/beijing/127858826.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,北京 | 1年经验 | 大专 | 招若干人\n",
      "大数据专员,6-8千/月,计算机软件,库学科技（河北）有限公司,127858826,五险一金 餐饮补贴 通讯补贴 专业培训 出国机会 定期体检 弹性工作 股票期权 年终奖金 绩效奖金,https://jobs.51job.com/beijing/127858826.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,北京 | 1年经验 | 大专 | 招若干人,任职要求：年龄：20-26周岁学历：大专及以上专业：不限岗位职责 1、完成具体指定的数据统计分析工作；2、编制并上报统计表，建立和健全统计台帐制度；3、协调管理统计信息系统，维护和更新统计数据平台；4、做好统计资料的保密和归档工作；5、结合统计指标体系，完善和改进统计方法。 福利待遇:1、试用期工资不打折，年终14薪，新年发红包，人人有份份，各种节假日福利，端午、中秋、春节，季度员工生日会等；2、 早九晚六，不加班，即使加班也有加班费，每月1000元补贴（餐补+车补+交通补）晚十点下班可享有打车报销，值班补贴80-120/天；3、完善的假期组合：带薪年假14天、带薪调休及法定假期；4、优厚的福利体系：养老保险、医疗保险、生育保险、工伤保险、失业保险及住房公积金；5、丰富多彩的员工活动：每月员工聚餐、年度体检、节日晚会、国内定期旅游活动、秋季运动会、领导新春红包雨，年会及优秀员工表彰活动等；,库学科技有限公司主营软件开发、数据分析、新媒体运营、企业咨询、品牌策划。公司在北京、上海、天津、沈阳、杭州、深圳、广州、成都、西安及各省省会均设有分支机构。,\n",
      "\n",
      "大数据开发工程师,1-1.8万/月,计算机软件,福建顶点软件股份有限公司,129328905,员工旅游 餐饮补贴 定期体检 节日福利 六险一金 专业培训,https://jobs.51job.com/shenzhen-ftq/129328905.html?s=sou_sou_soulb&t=0,民营公司 | 500-1000人,深圳-福田区 | 1年经验 | 本科 | 招2人\n",
      "大数据开发工程师,1-1.8万/月,计算机软件,福建顶点软件股份有限公司,129328905,员工旅游 餐饮补贴 定期体检 节日福利 六险一金 专业培训,https://jobs.51job.com/shenzhen-ftq/129328905.html?s=sou_sou_soulb&t=0,民营公司 | 500-1000人,深圳-福田区 | 1年经验 | 本科 | 招2人,岗位职责：1.参与部门数据项目的交付实施、根据客户需求进行本地化数据类设计、开发、实现；2.负责相关业务模块设计及核心代码的搭建及实现；职位要求：1.熟悉Linux的操作2.熟悉MYSQL或者ORACLE等数据库开发技术，能够熟练运用SQL3.熟悉java/python等其中之一语言开发4.熟悉Hadoop整个生态环境体系，对HDFS、MapReduce、Hbase、Hive、Sqoop等Hadoop技术框架工具使用熟练,顶点软件（股票代码：603383）成立于1996年，于2017年5月上交所主板上市，是一家具有持续自主创新能力的专业平台型软件公司及行业应用解决方案供应商，主要致力于为证券、期货、电子交易、互联网金融、银行等金融机构提供以业务流程管理（BPM）为核心的信息化解决方案。在证券期货、电子交易市场、互联网金融等领域，公司已成长为领先的全业务解决方案供应商。    公司管理总部设于上海，在福州软件园、武汉光谷软件园分别设有研发中心，在北京、上海、武汉、深圳、南京、沈阳、长春、郑州等地设有多家子公司与营销服务中心。    顶点软件是首批国家规划布局内重点软件企业、科技部创新基金实施十周年优秀企业、福建省高新技术企业、福建省软件十强企业、福建省省级企业技术中心、福建省重点软件骨干企业，通过“双软认证”、“ISO9001：2000”等资质认证。    顶点软件强调“客户、员工与股东”的共同发展与进步，对外，追求为客户创造价值，与客户的共同发展；对内，追求员工与公司的共同进步，努力实现员工个人发展与企业长远发展的和谐统一。    未来，顶点软件将通过深入挖掘客户需求，结合创新的思维与技术，实现“软件科技超越客户梦想”的追求，使顶点软件成为国内一流的软件企业，成为让客户、员工、股东以及社会所信赖并敬重的企业。员工福利    公司为员工提供具有竞争力的薪酬、健全的社会保障、周到的福利制度。公司尊重员工、关心员工，努力为员工解决后顾之忧，让每一个顶点人都能敬业乐业， 让员工与公司一起成长。一、 薪酬公司为员工提供富有竞争力的薪酬待遇，适时引进股权激励机制。二、社会保障公司为全体员工办理社会基本养老保险、失业保险、生育保险、工伤保险、医疗保险、补充医疗保险及住房公积金等。三、福利制度1、福利假期： 公司员工享受国家法定节假日、带薪休假及公司规定的其它假期。2、过节费： 在国家法定节假日给员工发放过节费。3、体检：公司为保障员工的身心健康，定期组织员工体检。4、员工餐厅：公司开设员工餐厅，为员工优惠提供中餐、晚餐。5、娱乐活动：公司定期或不定期举办各类体育娱乐活动，丰富员工业余生活。6、旅游费用：公司为员工提供每年一次旅游费用。7、其他：为员工提供生日礼物、结婚礼金等等。               相信自己，相信顶点，让我们携手，共创您与顶点的美好未来！     人才热线：0591-88267672；0591-88267674,\n",
      "\n",
      "大数据架构师,1.5-3万/月,计算机服务(系统、数据服务、维修),北京天一环球科技有限公司,128888255,五险一金 交通补贴 餐饮补贴 通讯补贴 专业培训 绩效奖金 年终奖金 弹性工作 定期体检,https://jobs.51job.com/beijing-cyq/128888255.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,北京-朝阳区 | 2年经验 | 本科 | 招2人\n",
      "大数据架构师,1.5-3万/月,计算机服务(系统、数据服务、维修),北京天一环球科技有限公司,128888255,五险一金 交通补贴 餐饮补贴 通讯补贴 专业培训 绩效奖金 年终奖金 弹性工作 定期体检,https://jobs.51job.com/beijing-cyq/128888255.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,北京-朝阳区 | 2年经验 | 本科 | 招2人,任职资格：1.熟悉大数据体系和架构，参与过数据中台或数据平台的建设，具备数据链路设计经验；2.熟悉Hadoop、Lambda、Kappa、Kaffka、Storm、Spark等大数据体系架构及中间件，具备良好的数据平台设计经验，具有很强的分析与设计能力；3.熟悉Python、Shell、Java等语言的一种或几种；熟悉Oracle、MySQL、MongoDB、Redis、Cassandra、HBase及主流的数据库。,北京天一环球科技有限公司成立于2011年03月07日，注册地位于北京市朝阳区慈云寺1号院3号楼1层、2层(八里庄孵化器3-0240号)，法定代表人为王海军。经营范围包括技术推广服务；计算机系统服务；应用软件服务（不含医用软件）；软件开发；产品设计；数据处理（数据处理中的银行卡中心、PUE值在1.5以上的云计算数据中心除外）；模型设计；包装装潢设计；教育咨询（不含出国留学咨询及中介服务）；经济贸易咨询；公共关系服务；会议服务；工艺美术设计；电脑图文设计、制作；企业策划；设计、制作、代理、发布广告；市场调查；企业管理咨询；组织文化艺术交流活动（不含演出）；文艺创作；承办展览展示活动；翻译服务；自然科学研究；工程和技术研究；农业科学研究；医学研究（不含诊疗活动）。（市场主体依法自主选择经营项目，开展经营活动；依法须经批准的项目，经相关部门批准后依批准的内容开展经营活动；不得从事国家和本市产业政策禁止和限制类项目的经营活动。）,\n",
      "\n",
      "大数据开发工程师,1.2-1.5万/月,互联网/电子商务,上海同界数据科技股份有限公司,124870379,,https://jobs.51job.com/shanghai-jaq/124870379.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-静安区 | 1年经验 | 本科 | 招1人\n",
      "大数据开发工程师,1.2-1.5万/月,互联网/电子商务,上海同界数据科技股份有限公司,124870379,,https://jobs.51job.com/shanghai-jaq/124870379.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-静安区 | 1年经验 | 本科 | 招1人,岗位职责：1、参与数据平台的构建工作, 演进现有数据平台基础设施；2、参与数据部门的相关的数据清洗开发；3、负责或参与项目开发过程中的技术攻关和性能调优。任职要求：1、 本科学历，计算机等相关专业，具有1年及以上大数据（hive/spark）开发经验；2、 有Java开发经验，熟悉linux，熟悉Python；3、 熟悉HDP或CDH相关生态，对Hive/HDFS/Yarn/Spark/Hbase等有较深的认识, 熟悉大数据架构及解决方案，并有实际工作经验；4、 熟悉数据仓库建设，对平台建设、方法论、ETL、数据治理有较好的理解；5、善于学习，有较强的责任心，能够自我驱动；6、有算法及数据结构基础者优先；7、具备丰富的高性能大并发场景下开发及架构经验及性能调优经验优先。,上海同界数据科技股份有限公司是一家专注于为客户提供数据营销相关服务的专业公司。我们专注于零售终端问题解决，多维度监控竞品动态，精确监控终端陈列，系统化管理业务模式，提升促销执行管理等细分领域。为客户提供******面 人员和数据管理解决方案。,\n",
      "\n",
      "大数据开发工程师,1.5-2.5万/月,网络游戏,上海晋展网络科技有限公司,113233132,五险一金 员工旅游 交通补贴 餐饮补贴 绩效奖金 年终奖金 定期体检 公司氛围佳 弹性工作,https://jobs.51job.com/shanghai-jdq/113233132.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-嘉定区 | 2年经验 | 本科 | 招1人\n",
      "运营商BU-大数据开发（数仓方向）-广州,1.2-1.5万/月,计算机软件,广州市讯飞樽鸿信息技术有限公司,130586096,五险一金 员工旅游 定期体检 交通补贴 补充医疗保险 餐饮补贴 通讯补贴 绩效奖金,https://jobs.51job.com/guangzhou-thq/130586096.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,广州-天河区 | 1年经验 | 大专 | 招1人,岗位职责：1、负责大数据数仓、报表(数据)开发，日常数据分析、数据统计，模型设计、优化等；2、负责大数据平台的一般性维护，日常故障处理，集群巡检等；3、运营分析系统数据层面的监控、维护；4、完成领导安排的其他任务。任职要求：1、熟练掌握hive sql、pl/sql语句，能编写较为复杂的sql语句对数据进行分析统计；2、熟练使用linux，熟悉shell脚本；3、掌握大数据hadoop生态圈基本原理及组件：hdfs、hive、hbase、mr、yarn、kafka、flume、sqoop等，使用过CDH发行版haoop；4、大专及以上学历，一年以上工作经验，思路清晰，有上进心，能服从工作安排；5、掌握flink实时计算框架者优先，掌握kettle工具者优先。此岗位为科大讯飞集团统一招聘岗位，人员通过简历筛选、笔试、初试、复试、终审等环节后录用。,广州市讯飞樽鸿信息技术有限公司成立于2009年，是科大讯飞的控股子公司，企业使命是针对通讯场景，利用智能语音技术，创造全新的通讯体验。    讯飞樽鸿先后加入广州人工智能产学研联盟、科大讯飞消费BG、科大讯飞运营商BU，旨在创造一家国内一流的语音互联网公司，深度开发核心技术（通信+大数据+云平台+融合支付+智能语音+人工智能），在终端、渠道、内容与服务、AI技术上改变终端设备和内容服务，提供更好的用户体验，持续创造信息和融合通信的在***使用方式，最终进行市场，业务，产品上的突破。公司现拥有一批多年从事ICT、语音技术和产品、互联网和通信经验的运营推广、产品研发和技术研发人员。公司员工近200人，90%具有大学本科以上学历，研发人员占比超过50%。凭借雄厚的软硬件开发实力，为运营商和企业客户提供技术先进、实用可靠的软硬件产品和解决方案。 经过持续的业务发展，公司已经拥有多项ICT和语音相关产品的著作权、专利。我们的愿景：以人为本！以科技为依托！以市场为导向！积极进取，勇于创新！我们的价值观诚信 ——做事先做人，做人以诚信正直为基，信诺、无愧务实 ——结果导向，细分目标执行，脚踏实地做好当前的事奋斗 ——专注、坚韧，持续的激情简单 ——专注做事，深入钻研， 将简单做到极致公司福利待遇1、基本薪酬：提供具有竞争力的薪酬、年度绩效评估和薪酬调整。2、其他奖金：年终绩效奖金+激励奖金。3、基础福利：五险一金+商业保险一应俱全。4、健康关怀：全员免费享有每年一次的全面专业体检。5、员工活动：每月提供团队活动经费，支持团队成员集体“吃喝玩乐”。6、其他福利：节日礼品、下午茶等。------讯飞樽鸿期待您的加入！,\n",
      "\n",
      "软件工程师(大数据),0.7-1.3万/月,计算机服务(系统、数据服务、维修),云橙控股（深圳）有限公司,130500680,五险一金 餐饮补贴 专业培训 定期体检 弹性工作,https://jobs.51job.com/guangzhou-hpq/130500680.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,广州-黄埔区 | 2年经验 | 大专 | 招若干人\n",
      "大数据开发工程师,1-1.8万/月,计算机软件,广州安正软件有限公司,129081128,,https://jobs.51job.com/shenzhen/129081128.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳 | 2年经验 | 本科 | 招2人,岗位职责:1、负责日常ETL需求开发、测试2、协助完成相关数据模型建设3、协助完成相关大数据应用集成建设，包括: 监控、调度、离线大数据、实时大数据等。任职要求：1、计算机相关专业，2年以上Hadoop相关工作经验；2、具有大数据生态开发经验,包括不限于Hadoop、Hive、Impala、Spark、Spark streaming、、Elastic Search 、Logstash、Kafka等3、具有数仓ETL开发经验，包括不限使用：Infromatica PowerCenter、Oracle、Sqlserver存储过程、BI开发3、具备较强的编码能力，掌握SQL、Python、Shell、Java其中二种编程语言4、有证券、基金行业应用开发经验者优先,公司简介广州安正软件股份有限公司（以下简称安正软件或公司）于2005年成立，股票代码：836655，安正软件总部设立在广州，同时在深圳、上海、北京设有实施中心，服务网络辐射到全国。自成立来，安正软件以“让数据更简单”为使命，在大数据时代来临之前便已为客户提供数据仓库技术的相关产品与技术服务。如今，安正软件不忘使命，融合业务的理解与探索、数据仓库与大数据技术，专注于数据技术的创新与实践，通过挖掘数据的价值，为客户提供数据从战略、运营、营销等从IT规划到实施落地的成熟的产品和解决方案，为客户提供面向业务的、整体的、可持续的解决方案、产品与服务，让客户更简单、可持续地获取数据的能量与价值，驱动管理与业务模式的革新。经过十多年的探索和开拓，现在的安正软件在行业内有所建树，沉淀了众多的典型客户，特别在大资管行业，拥有了较深的市场覆盖，与客户一道持续践行数据创造财富，以数据技术推动财富资管行业的发展。文化理念企业愿景：数据改变未来企业使命：让数据更简单核心价值观：明德致知、慎思笃行做人理念：正直、坦率、感恩做事原则：专注、挑战、快速行动、担当、坚韧我们有健全的福利体系：1、上班时间：弹性工作制，平衡工作与生活；2、做五休二：周末双休，工作+娱乐两不误；3、五险一金：入职即购买五险一金，公积金基数高于市场水平；个人比例自由选择，完美降低税点！4、员工活动：提供不定期员工活动，活动筋骨，增进同事间的感情；5、丰富补贴：享有电脑补贴、餐补、出差补助等，降低生活压力；6、假期种类繁多：法定节假（春节、端午、中秋、元旦）、婚假、产假、陪产假、三八节假、儿童节假等，让你有更多的时间陪伴家人；7、带薪年假：最多享有15天，回家、旅游不愁没假期；8、带薪病假：每月享有1天的带薪病假，为你解忧；9、舒适的办公环境：地铁上盖，交通便利；11、各大奖项：伯乐奖、绩效奖、项目奖金、年终奖等；12、每年有调薪机会；13、完善的晋升通道：技术、管理双向通道供你选择；14、其他福利：技术培训、免费咖啡、下午茶等着你来！    我们有完善的发展通道：    技术通道：初级工程师—中级工程师—高级工程师—总工程师/技术总监    管理通道：专员-主管-经理-总监    我们正处于高速成长和发展阶段，需要有激情、有责任心，有梦想在数据价值领域有所作为的人才加入，共同实现客户的数据价值梦想、共同推动数据价值领域的发展与进步。,\n",
      "\n",
      "大数据开发工程师（应往届生可）,0.8-1万/月,计算机软件,上海知平信息技术有限公司,130337892,五险一金 员工旅游 出国机会 年终奖金 定期体检,https://jobs.51job.com/shanghai-fxq/130337892.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-奉贤区 | 1年经验 | 本科 | 招2人\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "大数据开发工程师（应往届生可）,0.8-1万/月,计算机软件,上海知平信息技术有限公司,130337892,五险一金 员工旅游 出国机会 年终奖金 定期体检,https://jobs.51job.com/shanghai-fxq/130337892.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-奉贤区 | 1年经验 | 本科 | 招2人,岗位职责：1.参与分布式服务设计及开发。2.参与大数据组件、中间件设计及开发。3.参与公司核心产品、项目研发，针对海量数据开发具有数据收集、统计、分析和挖掘能力的创新型产品。4.学习并研究大数据技术、最新动向以满足产品、项目的迭代需求。任职要求：1.扎实的计算机基础，1-3年大数据开发经验，掌握基本设计理念，熟练应用一门以上面向对象开发语言。2.扎实的数据结构基础，掌握常见算法。3.对关系型/非关系型数据库有一定认识，具备较好数据库的设计理念。4.对大数据生态有较好认识，具备spark, hive, hadoop, kafka, sqoop, kylin, azkaban等大数据组件基本知识。5.基础扎实的应届毕业生优先考虑、培养，共同成长。,一、 【知平由来】 ：知平软件是于2012年创立，源自“格物致知，修齐治平”是我司格言，格物的含义为努力学习，努力尝试不同的东西，融汇贯通达到致知，最终掌握了事物的本质。修齐治平含义为修身齐家治国平天下。二、 【知平简介】 ：知平软件即上海知平信息技术有限公司成立于2012年1月，公司主营方向是云计算相关产品与服务。我们预测随着云计算以及移动计算的普及，国内各企业在人力成本高企的压力下，会逐渐向精细化、自动化、分布化管理方式进步。我们采取放手管理方式，推崇精英文化，秉承“知行合一、去繁就简”的运营理念，借助强大的开源社区为各行各业的客户简化管理流程，提高工作效率，从而达到降低运营成本的目标。三、 【知平服务】 ：作为中国移动互联网企业营销的领导品牌，我们一直坚持“格物致知，修齐治平”的精神，坚守“为客户创造价值”的核心理念，致力开发设计***的移动互联网营销解决方案。目前公司服务的客户有IBM、HP、通用汽车、祥光集团、如新集团等国内外知名企业。四、 【知平使命】 ：更好的成就他人，从而更好的成就自己。1、为客户创造价值，帮助客户实现梦想；2、为员工创造价值，帮助员工达成买房、买车的目标，以过上更美好的生活；3、为股东创造价值，帮助股东获得合理的商业回报，实现股东的社会价值。,\n",
      "\n",
      "大数据开发工程师（双休+奖金）,6-8千/月,计算机服务(系统、数据服务、维修),上海韦克多瑞信息科技有限公司,130132991,五险一金 补充公积金 年终奖金 绩效奖金 定期体检 员工旅游 弹性工作 股票期权,https://jobs.51job.com/shanghai-hkq/130132991.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-虹口区 | 1年经验 | 大专 | 招4人\n",
      "大数据开发工程师（双休+奖金）,6-8千/月,计算机服务(系统、数据服务、维修),上海韦克多瑞信息科技有限公司,130132991,五险一金 补充公积金 年终奖金 绩效奖金 定期体检 员工旅游 弹性工作 股票期权,https://jobs.51job.com/shanghai-hkq/130132991.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-虹口区 | 1年经验 | 大专 | 招4人,岗位职责：1. 协助完成大数据实时开发工作2. 大数据的其他相关组件及功能开发等3. 参与现有数据架构改造及优化等岗位要求：1. 了解数据库技术2. 了解大数据相关技术,上海韦克多瑞信息科技有限公司，是国家高新技术企业，上海市软件行业协会会员单位，专注于互联网与移动互联网领域的软件研发团队，是国内领先的互联网及移动互联网应用产品及解决方案提供商。韦克多瑞科技秉承“诚信为本，服务至上”的理念，公司致力于公安系统、金融交易系统、智慧园区系统和区块链应用等高端软件产品研发，产品覆盖各大行业，在全体同仁的不懈努力下，获得了40多项软件著作权及荣誉证书等，得到了客户和社会各界的认可与支持。提供专业产品研发服务，从产品定位、研发到运营，用更多的时间与客户沟通需求，用更多的精力专注产品设计，让每一位与韦克多瑞合作的客户都收获惊喜。韦克多瑞拥有多年互联网研发经验，服务上千家企业，为您量身打造更符合您行业特点的解决方案；用更成熟的方案解决行业痛点，用专业的售后团队为您提供更满意的服务。,\n",
      "\n",
      "大数据开发工程师,1.1-2万/月,计算机软件,苏州斐波那契信息技术有限公司,128363255,,https://jobs.51job.com/suzhou-gyyq/128363255.html?s=sou_sou_soulb&t=0,民营公司 | 少于50人,异地招聘 | 1年经验 | 本科 | 招1人\n",
      "大数据开发工程师,1.1-2万/月,计算机软件,苏州斐波那契信息技术有限公司,128363255,,https://jobs.51job.com/suzhou-gyyq/128363255.html?s=sou_sou_soulb&t=0,民营公司 | 少于50人,异地招聘 | 1年经验 | 本科 | 招1人,岗位职责：1、开发并维护智能大数据平台，在规定日程内完成指定的相关任务；2、定义、设计、实现和维护多层级的分布式软件系统，并完善相关文档；3、确保系统满足功能、性能、可扩展性、可靠性；4、评估模块的开发工作量，规划实现工作，发布系统变更；5、积极维护团队在质量方面的标准，推广***实践；6、理解业务问题，并能提出解决方案。岗位要求：1、计算机相关专业本科以上学历，需全日制毕业，具备2年以上相关研发经验；2、良好的解决问题能力，能独立解决问题；3、掌握大数据相关技术，如hadoop/hbase/spark/elasticsearch/flink, etc；4、熟悉olap相关引擎，如kylin/druid等；5、掌握面向对象设计思想， 2年以上java 开发经验；熟悉scala更佳；6、熟悉linux系统，能独立编写shell脚本；7、有大型可扩展分布式系统设计或者大数据处理系统设计经验更佳；8、有推荐系统或者用户画像系统开发经验更佳。公司介绍：斐波那契信息技术有限公司是面向企业的大数据智能技术服务商，我们的宗旨是： 为企业唤醒数据价值。斐波那契致力于为客户提供智能的大数据分析和营销平台及产品， 帮助客户挖掘潜在客户，精准营销，把控风险。 斐波那契以“数据中台”为核心战略，将建成以数据科学家，数据产品专家、数据处理专家为核心的技术团队。核心团队成员来自IBM、eBay等大型to-B 和互联网企业，拥有大数据和技术多年实战经验。,苏州斐波那契信息技术有限公司是面向企业的大数据智能技术服务商，我们的宗旨是： 为企业唤醒数据价值。我们以数据科学家，数据产品专家、数据处理专家为核心的技术团队，致力于为客户提供智能化的大数据分析和营销平台及产品， 帮助客户挖掘潜在客户，精准营销，把控风险。我们拥有十多年的行业积累，将建立自由的标签组合，帮助客户快速获取用户画像和产品画像，并利用平台的精准推荐模型，实现智能化精准营销。并将提供丰富的营销报告，帮助客户更好的分析营销效果，及时调整营销策略。苏州斐波那契以“数据中台”为核心战略，核心团队成员来自IBM、eBay等大型to-B 和互联网企业，拥有资深的大数据技术专家，以及丰富的实战经验。,\n",
      "\n",
      "大数据工程师 (MJ000159),1.5-2万/月,互联网/电子商务,北京微播易科技股份有限公司,128747504,,https://jobs.51job.com/beijing-cyq/128747504.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,北京-朝阳区 | 2年经验 | 本科 | 招2人\n",
      "大数据工程师 (MJ000159),1.5-2万/月,互联网/电子商务,北京微播易科技股份有限公司,128747504,,https://jobs.51job.com/beijing-cyq/128747504.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,北京-朝阳区 | 2年经验 | 本科 | 招2人,【岗位职责】1. 参与大数据平台的搭建、开发、维护、优化、升级2. 参与数据仓库建设和维护3. 负责数据清洗、加工、分析、处理等开发工作4. 完成数据分析工作【岗位要求】1. 大学本科及以上学历，计算机、软件工程、信息管理、数学等相关专业；2. 2年及以上大数据开发相关工作经验，熟悉数据架构和数据仓库理论相关知识，对大数据有较深理解和认识，有 ETL 工作经验者优先；3. 熟练掌握 Scala，Java 至少一种编程语言，并能熟练进行 Spark 程序开发；4. 熟悉大数据处理工具/框架中的一项或多项，包括但不限于 Hadoop,Mapreduce,Hive,Spark,Kudu,HBase 等，有 Kudu 开发经验者优先；5. 有实时开发经验者优先，包括不限于：Spark-Streaming，Flink；5. 具备良好的数据分析能力和学习能力，责任心强，具备较强的解决方案编制能力、良好的沟通协调能力。关键词：数据仓库、ETL、Spark，Kudu,微播易，数据驱动的短视频KOL交易平台，提供一站式网红达人及KOL资源采买、社交大数据服务、社媒传播策略服务。为广告主解决社交媒体及短视频投放过程中触达难、精准难、效率难、ROI难等问题。微播易平台入驻超100万人气KOL、网红达人资源，覆盖抖音、快手、微博、微信、B站、小红书、美拍、秒拍、一直播等25+主流社交平台。服务包括美妆日化、数码3C、食品饮料、游戏动漫、在线教育、服装服饰、电商等20+主流行业，包括宝洁、雅诗兰黛、京东、蒙牛、伊利、以纯、戴森、三星等2000+国内外知名品牌客户。总部北京，在上海、广州、深圳、杭州等地设有分公司。行业标签：跨媒体一站式网红&KOL采购平台、网红营销、KOL营销、短视频营销、直播营销、双微营销、社媒传播策略、社交大数据、社媒舆情,\n",
      "\n",
      "大数据开发工程师,1-2万/月,计算机软件,西安立人行档案文件管理咨询有限公司,125231932,五险一金 节日福利 交通补贴 餐饮补贴 年终奖金 定期体检,https://jobs.51job.com/shenzhen-ftq/125231932.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳-福田区 | 2年经验 | 本科 | 招3人\n",
      "大数据开发工程师,1-2万/月,计算机软件,西安立人行档案文件管理咨询有限公司,125231932,五险一金 节日福利 交通补贴 餐饮补贴 年终奖金 定期体检,https://jobs.51job.com/shenzhen-ftq/125231932.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳-福田区 | 2年经验 | 本科 | 招3人,工作职责：1、对公司各个系统数据进行梳理，排查，建立统一数据字典；2、制定数据标准，数据开发规范标准，推广并监督实施；3、参与各个系统的数据架构设计，提出合理建议；4、搭建公司统一数据平台，为上层中台服务和相关报表系统提供底层数据支撑；5、探索新的数据使用场景，使数据转换为商业价值任职要求：1、本科及以上学历，计算机相关专业；2、具有优秀的编码能力，至少掌握一种编程语言：Java/Python/Scala以及脚本语言Shell。熟练使用SQL,HQL;3、掌握主流关系型数据和非关系型数据库的使用，Postgresql/Oracle，熟悉常用函数和存储过程开发。4、熟悉Hadoop技术平台的生态圈， Hdfs、Yarn、Hbase、Hive、Sqoop等；5、熟悉分布式计算框架Spark；流式计算，实时数据处理架构；6、熟练使用ETL工具和其他数据同步工具，Kettle等；7、熟悉基于hadoop生态搭建数据仓库实施步骤；8、掌握数据建模理论并有相关实施经验。级别：高级：7年以上数据开发经验中级：5年以上数据开发经验初级：2年以上数据开发经验；,西安立人行档案文件管理咨询有限公司是中国金融业最重要的综合服务提供商之一，致力于成为国内***的金融信息技术服务与业务流程服务的综合服务提供商。发展路上十多年，西安立人行公司已为100多家客户提供了专业化服务，客户类型涵盖了上市公司、金融机构、政府部门等，包括中国平安集团、中国太平保险集团、中国石油化工集团、美国强生公司、中国邮政、红星美凯龙等世界500强公司。西安立人行总部位于古都西安高新区，业务遍及全国。在北京、上海、深圳设置区域中心，在深圳、福州设置研发分中心，在各省会以及主要城市设立分公司，为客户提供本地化服务。西安立人行公司持续良好的发展获得了各界给予的各项荣誉和资质：？    ***高新技术企业？    陕西省双软企业？    陕西省民营科技型企业？    陕西省技术贸易型企业？    陕西省AA级信用企业？    陕西省政府入库供应商？    西安市民营科技型企业？    西安市大数据企业？    中国软件协会AAA级信用企业？    陕西省软件协会会员？    中国档案协会会员？    国际档案协会会员……同时西安立人行公司通过多项资质认证，用规范化体系来不断提升服务与产品的品质，保障公司持续经营：？    CMMI软件能力成熟度模型集成3级认证？    ITSS信息技术服务标准符合性三级认证？    ISO9001质量管理体系认证？    ISO27001安全管理体系认证？    ISO14001环境管理体系认证？    ISO45001职业健康安全管理体系认证？    ISO20000信息技术服务管理体系认证……立人十载，立行百年。公司取名于《论语？雍也》的一句话：己欲立而立人。“立”是成立，成功的之意，自己想成功首先使别人先能成功。一句话道尽了企业经营的精髓，只有专注协助客户，用心扶持员工，使项目运营成功，让员工持续进步，才能让立人行公司得以发展，与客户、员工共创未来。,\n",
      "\n",
      "广告大数据开发工程师,2.5-3.5万/月,网络游戏,上海姚际信息科技有限公司,124522960,五险一金 员工旅游 定期体检 年终奖金 全勤奖 工作餐 带薪年假 小蜜蜂奖 生日福利 节假日福利,https://jobs.51job.com/shanghai-xhq/124522960.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-徐汇区 | 2年经验 | 本科 | 招若干人\n",
      "广告大数据开发工程师,2.5-3.5万/月,网络游戏,上海姚际信息科技有限公司,124522960,五险一金 员工旅游 定期体检 年终奖金 全勤奖 工作餐 带薪年假 小蜜蜂奖 生日福利 节假日福利,https://jobs.51job.com/shanghai-xhq/124522960.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-徐汇区 | 2年经验 | 本科 | 招若干人,岗位职责：1. 数据平台的架构设计和开发，以满足对分析需求的支持2. 数据平台ETL流程优化及解决ETL相关技术问题岗位要求：1. 工科、计算机、数学、统计学或其他相关专业大专以上学历2. 熟练使用Java/Scala或Python，熟练掌握Linux常用命令3. 熟练掌握SQL语法，熟练使用MySQL、Oracle、SQLServer等一种关系型数据库4. 熟悉大数据开发相关技术，如Dataworks/Maxcompute, Hadoop、Hive、Spark、Flink、Kafka等5. 2年以上大数据分析经验，能利用大数据对业务进行评估优化6. 有广告业务经验优先,上海姚际信息科技有限公司是一家专注于移动互联网领域内的手游公司，主要研发、设计、制作及运营移动端的手机游戏。公司注重团队氛围、人才积累及知识经验沉淀。我们的工作氛围：在稳定而舒心的环境里勤奋向上。在做出超用户预期的产品体验过程中，互相提携，集体成长，努力构造优秀的学习型团队。殷切希望团队中的每一位成员收获职业生涯中的一桶金、各项能力得到飞跃成长。我们需要的你是低调务实、创新专业、积极乐观及自然坦诚；还需具备较强的领悟能力、快速的学习能力及独立解决问题的工作能力。让玩家愉快玩耍，让员工愉快成长是愉玩的使命。海纳百川、汇聚精英、低调而务实是姚际的宗旨。目前正在运营的游戏类型：捕鱼类、休闲类。,\n",
      "\n",
      "大数据开发助理,1-1.5万/月,计算机软件,上海麦美网络科技有限公司,130183988,,https://jobs.51job.com/shanghai-hpq/130183988.html?s=sou_sou_soulb&t=0,民营公司 | 少于50人,上海-黄浦区 | 1年经验 | 本科 | 招若干人\n",
      "大数据开发助理,1-1.5万/月,计算机软件,上海麦美网络科技有限公司,130183988,,https://jobs.51job.com/shanghai-hpq/130183988.html?s=sou_sou_soulb&t=0,民营公司 | 少于50人,上海-黄浦区 | 1年经验 | 本科 | 招若干人,【岗位职责】了解公司产品和业务方向，能够快速学习公司产品；熟悉客户业务数据，基于客户应用场景，搭建标签体系；能跨部门和产品，工程师，以及运营团队合作，一起促使项目交付；沟通与表达能力强，快速准确理解和传达客户需求。【任职资格】1、1-3年工作经验；本科及以上学历，计算机、数学或相关专业；2.、对数据敏感，有较强的逻辑思维和信息分析能力，熟练使用SQL；3、良好的沟通与协调的能力、分析与解决问题的能力；4、熟练使用各种办公软件及数据分析工具，优秀的中英文口头及书面表达能力；5、品貌端正，态度温和，积极进取，有责任心，虚心好学;6、有快消digital marketing工作经验优；7、有CDP/DMP 相关经验优先。,麦美网络科技致力于互联网、物联网及数据化服务平台的软件应用系统的咨询、设计和开发，业务领域覆盖了法律服务、环境监测以及企业管理。我们的团队由技术热情的工程师为主组成，新技术、新想法以及耐心细致的创造系统类产品和服务是我们一贯的宗旨。欢迎您的加入！,\n",
      "\n",
      "BI与大数据服务部开发工程师助理,0.8-1万/月,服装/纺织/皮革,上海美特斯邦威服饰股份有限公司,126943970,五险一金 补充医疗保险 免费班车 专业培训 定期体检 餐饮补贴,https://jobs.51job.com/shanghai-pdxq/126943970.html?s=sou_sou_soulb&t=0,民营公司 | 10000人以上,上海-浦东新区 | 2年经验 | 本科 | 招1人\n",
      "BI与大数据服务部开发工程师助理,0.8-1万/月,服装/纺织/皮革,上海美特斯邦威服饰股份有限公司,126943970,五险一金 补充医疗保险 免费班车 专业培训 定期体检 餐饮补贴,https://jobs.51job.com/shanghai-pdxq/126943970.html?s=sou_sou_soulb&t=0,民营公司 | 10000人以上,上海-浦东新区 | 2年经验 | 本科 | 招1人,1、参与数据服务相关的接口和业务管理后台的设计和开发；2、参与大数据数据处理相关(Flink/Spark)开发工作；1、计算机相关专业，本科及以上学历，2年以上开发经验。2、熟悉面向对象和设计模式，熟悉java开源框架，如Spring、Spring MVC,MyBatis、SpringCloud等3、熟悉Oracle、MySQL，有大型项目使用经验者优先。4、了解大数据开发，有项目使用经验者优先。5、有零售行业分析经验者优先；6、具备良好的沟通能力、理解能力和较强的学习能力，有团队合作精神,上海美特斯邦威服饰股份有限公司是中国服装产业代表企业之一，浸润时尚产业20年，秉承“世界的裁缝”的梦想，以“不走寻常路”的精神不断进行企业的发展创新和向上突破。目前公司旗下拥有“Metersbonwe”和“ME&CITY”两大时尚休闲品牌；“米喜迪”和“MooMoo”两大童装品牌，慢生活体验品牌“褀”以及独立电子商务平台“邦购网”。截止至2016年底，已经在全国设有专卖店3900余家；员工近20000人。公司始创于1995年，在国内首创“生产外包，直营销售和特许加盟相结合”的经营模式，全面贯彻价值链整合管理和品牌整合营销的理念。通过整合品牌策略、产品企划、产品开发、生产采购、物流、市场拓展、销售服务和信息化管理等各个价值链，公司不断地提升整体管理能力和运营绩效。2008年8月公司在深圳证券交易所成功上市。从2013年公司即启动创新转型： 以线上线下消费者体验环境升级、线上线下会员管理升级，线上线下供应链管理升级等O2O形态为消费者带来跨越空间的服务体验升级。美特斯邦威将持续借力社会互联网商业公共平台，充分满足消费者多样性的购物需求和购物体验选择。作为一家国内领先的休闲服饰企业，美特斯邦威积极转变陈旧思维，改变对消费者的固有认知，打破传统定位的年龄符号，通过聚焦消费者精准画像，探寻未来的消费行为特征，完成自我裂变升级，不忘民族品牌情节，坚定不移的为消费者提供高质量、高标准的产品及服务，用心守护每一位消费者的形象工程。,\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "\n",
      "大数据开发工程师,25-40万/年,专业服务(咨询、人力资源、财会),上海华略智库集团有限公司,130305351,五险一金 补充医疗保险 专业培训 弹性工作 定期体检,https://jobs.51job.com/shanghai-hpq/130305351.html?s=sou_sou_soulb&t=0,民营公司 | 少于50人,上海-黄浦区 | 2年经验 | 本科 | 招若干人\n",
      "大数据开发工程师,1.5-2.5万/月,网络游戏,上海晋展网络科技有限公司,113233132,五险一金 员工旅游 交通补贴 餐饮补贴 绩效奖金 年终奖金 定期体检 公司氛围佳 弹性工作,https://jobs.51job.com/shanghai-jdq/113233132.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-嘉定区 | 2年经验 | 本科 | 招1人,工作职责 1、负责数据的采集、清洗、抽取、抽象；负责业务基础数据建模，建设业务数据仓库 2、基于海量数据的数据仓库，为业务搭建通用的查询和分析解决方案 3、梳理整体业务指标，可视化报表开发4、管理并优化存储&计算资源利用效率、监控并维护例行ETL任务 任职资格 1、计算机或相关专业本科及以上学历；2年以上大型数据仓库架构设计、模型设计、ETL设计的相关经验 2、熟悉Hadoop生态，熟悉SQL，有一定的SQL性能优化经验 3、熟练掌握Java语言，MapReduce编程，Python/Shell等脚本语言，有良好的编程习惯 4、具备大数据云平台、计算存储平台、可视化开发平台经验5、产品和业务理解力强，对数据敏感；有用户产品数据分析经验者优先。,喜扑游戏成立于2013年，是一家专注于手机游戏产品的研发、运营的年轻企业，拥有一批对互联网充满激情、热爱并有丰富经验的专业人士，我们以广大游戏玩家为核心目标，深度挖掘玩家的需求，为他们创建快乐。公司自成立以来始终坚持以人才为本、求实创新的经营理念。       为了开发出真正适合市场需求的手游产品，不断优化公司配备，摆脱思维定势，洋溢创新灵感，同时也令用户得到最优质的服务和***的体验回报。喜扑游戏目前已与新浪、腾讯、网易、百度、4399、盛大、巨人、360、天涯社区等国内外数百家知名企业建立了良好的合作伙伴关系，业务范围全方面扩展，完成众多大型手机游戏的联合运营。,\n",
      "\n",
      "大数据开发工程师,1.5-2万/月,通信/电信/网络设备,上海朋邦实业有限公司,129146428,五险一金 交通补贴 通讯补贴 绩效奖金 餐饮补贴,https://jobs.51job.com/shanghai-mhq/129146428.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-闵行区 | 1年经验 | 本科 | 招10人\n",
      "大数据开发工程师,25-40万/年,专业服务(咨询、人力资源、财会),上海华略智库集团有限公司,130305351,五险一金 补充医疗保险 专业培训 弹性工作 定期体检,https://jobs.51job.com/shanghai-hpq/130305351.html?s=sou_sou_soulb&t=0,民营公司 | 少于50人,上海-黄浦区 | 2年经验 | 本科 | 招若干人,1、负责数据产品线的研发及方案制定。2、负责大数据平台和存储平台的设计和搭建工作，组织实现内外部对大数据服务的需求。3、带领团队设计、开发具有创新价值的大数据底层平台、大数据上层应用系统等。结合云计算，开发大数据产品。4、统筹、指导数据项目的技术走向，负责系统模块与系统架构的总设计。5、创建数据挖掘、数据分析和建模相关的核心算法和技术代码实现。6、通过数据挖掘对产品和事件进行监测分析和早期风险预警。任职要求1.  2年以上数据仓库／ETL／数据处理相关开发经验；沟通能力强；本科及以上学历。2.   熟悉整个大数据的完整处理流程，包括数据的采集、清洗、预处理、存储、分析挖掘、机器学习和数据可视化；3.   熟悉Hadoop相关各种开源项目，掌握Hive、Spark、Streaming、Storm、Kafka等数据处理核心组件；对HDFS、M/R、Yarn的原理有深入了解，掌握系统优化、资源分配与权限控制。4.   熟悉掌握Python/Scala语言开发，至少熟悉Redis/MySQL/SQL server/Oracle一种5.  熟悉Linux平台以及脚本编写6.  至少熟练使用一种主流的可视化工具或组件，如Tableau、FineBI，echats等。7.  精通Java开发，熟悉Spring、Spring mvc、Spring Boot、mybaits等框架。8. 有相关知识库或知识图谱的大数据开发经验者优先考虑,华略智库是一家立足上海、辐射全国的咨询服务机构，拥有上海城市创新经济研究中心、开发区研究院、上海崇明生态发展研究院等一批专业智库品牌。华略智库致力于为各级地方政府、开发区和企业提供从理念到实践（Idea to Implementation）的一揽子咨询服务方案，主要业务包括战略研究、产业规划、园区规划、招商策划、投融资方案、政策设计、媒体资讯、论坛峰会等，涉及领域涵盖城市管理、产业发展、园区建设、科技创新、金融服务、绿色发展、制度创新、绩效评估、社会治理等。华略智库拥有来自广泛专业研究领域的资深专家成员。近年来，团队成员先后完成了国家发改委、民政部、长三角、北京、上海、天津、浙江、江苏、山东、河北、吉林、贵州、云南、广西等省市政府、开发区的500多项重点课题研究。华略智库与中国产业升级网和上海星动力科创空间建立了战略合作关系，协力打造区域产业发展的集成服务商。,\n",
      "\n",
      ".net core 开发工程师,0.6-1.2万/月,计算机软件,云润大数据服务有限公司,125489474,五险一金 补充医疗保险 补充公积金 带薪年假 周末双休,https://jobs.51job.com/guangzhou-thq/125489474.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,广州-天河区 | 1年经验 | 本科 | 招若干人\n",
      "大数据开发工程师,1.5-2万/月,通信/电信/网络设备,上海朋邦实业有限公司,129146428,五险一金 交通补贴 通讯补贴 绩效奖金 餐饮补贴,https://jobs.51job.com/shanghai-mhq/129146428.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-闵行区 | 1年经验 | 本科 | 招10人,薪资可面议（根据能力定价值）！,上海朋邦实业有限公司是一家迅速成长、充满蓬勃生机的IT服务企业，是智慧网路解决方案与服务提供商。一直以来，上海朋邦依托最先进的产品与技术，潜心钻研行业客户的需求，为客户量身定制解决方案，致力于确保客户网络性能稳定，帮助客户降低运营成本，快速应对市场变化，发挥竞争优势。上海朋邦提供以云计算、大数据、电子商务等技术为核心的综合IT服务，业务范围包括：数据中心、云计算设计平台与构建，网络架构、信息安全、融合通讯，电子政务的解决方案和专业服务。公司在全国设立了多个分支机构、成功服务于电力、金融、政府、交通、教育、医疗、大企业等众多的行业客户。       上海朋邦实业有限公司获得的“企业网络五钻认证服务商”是华为服务认证的***别。公司拥有完整的技术服务团队、强大的服务平台支持能力和一批高技术能力认证工程师，能够从供应链、备件、客户支持、项目交付、服务解决方案到认证培训等方面，为客户提供全方位服务。公司优秀的服务能力及丰富的交付经验，是服务能力的标杆。,\n",
      "\n",
      "助理开发工程师,5-8千/月,计算机软件,广东蔚海数问大数据科技有限公司,124064306,员工旅游 弹性工作 餐饮补贴 年终奖金 五险一金 员工体检,https://jobs.51job.com/guangzhou-thq/124064306.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,广州-天河区 | 1年经验 | 本科 | 招2人\n",
      ".net core 开发工程师,0.6-1.2万/月,计算机软件,云润大数据服务有限公司,125489474,五险一金 补充医疗保险 补充公积金 带薪年假 周末双休,https://jobs.51job.com/guangzhou-thq/125489474.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,广州-天河区 | 1年经验 | 本科 | 招若干人,岗位职责：1、负责新产品、项目平台的研发、测试与维护；2、参与公司产品的软件维护及版本升级迭代开发；3、具有一定的设计和需求分析能力，能够独立完成软件开发工作；4、协助测试工程师完成产品模块测试工作；5、编写和维护开发文档。任职要求1.熟练使用Asp.net、.Net  Core、EF Core、MVC等相关.Net技术；两年以上.net项目开发经验，会.net core 、MVC优先考虑 ；2.熟练使用jQuery、Javascript、Ajax、Json等,熟悉Vue、React、Angular、Bootstrap、LayUI其中一种主流框架；3.熟练使用WepApi；4.熟悉SQLServer、MySql、Redis等其中一种数据库，具有良好的SQL编写能力；5.熟悉Linux环境下.net core运行的相关配置；6.具有良好的代码编写习惯，较强的分析问题能力及独立承担任务的能力；7.主动、好学、责任心强，具备良好的沟通和团队协作能力.,云润大数据服务有限公司创办于2013年12月，注册资金共5001万元。是一家基于全国领先的大数据、云计算、人工智能、区块链等技术向客户提供创新型研发技术服务的软件企业。主营业务为：数据处理和存储服务；信息电子技术服务；网络技术的研究、开发；电子、通信与自动控制技术研究、开发；科技信息咨询服务等。以大数据、云计算为主导产品和服务。云润以自有的搜索引擎、集成开发平台应用来源，进行数据内容的聚合和管理，并开发出面向移动终端、互联网、手持终端等大数据业务产品；为政府、企业提供全方位的数据整合和数据内容分析服务。拥有CMMI5、ISO9001、ISO2000、ISO27001、信息安全服务、安防等认证资质，2016年被评为国家高新技术企业、软件企业，具有200多项大数据领域的知识产权和30余项发明专利。2017年被评为广东省大数据骨干企业。2020年获得广东省大数据工程技术研发中心。人才理念：1.目标明确：不浪费员工职业生涯的时间，产出等于回报；2.人尽其才：不埋没员工的才华，定期考核提拔潜在人才，并且有才能的人可随时自荐；3.从善如流：对有追求、有态度、有想法的人不设限制，平行交流，并且定期聆听各方意见； 4.追求高效：能上班解决的问题，不提倡拖到下班后加班解决。我们尊重和珍惜人才，更需要有奋斗目标的人才！公司福利：1.五险一金；2.绩效奖励；3.周末双休；4.定期组织活动； 5.弹性工作时间。,\n",
      "\n",
      "数据开发工程师,1.5-2.5万/月,互联网/电子商务,杭州城市大数据运营有限公司,131744877,五险一金 定期体检 周末双休 带薪年假,https://jobs.51job.com/shanghai-cnq/131744877.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-长宁区 | 2年经验 | 本科 | 招2人\n",
      "助理开发工程师,5-8千/月,计算机软件,广东蔚海数问大数据科技有限公司,124064306,员工旅游 弹性工作 餐饮补贴 年终奖金 五险一金 员工体检,https://jobs.51job.com/guangzhou-thq/124064306.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,广州-天河区 | 1年经验 | 本科 | 招2人,,公司介绍：蔚海数问成立于2017年3月，是中国新电信（HK08167）旗下的合资公司，注册资本 2000 万元，定位为以技术驱动为引领的大数据高科技公司， 专注于大数据咨询服务、大数据应用平台 研发、数据可视化、海量数据分析以及人工智能、应用开发等，深耕环保、政务、公安、交通、教育等行业，拥有丰富的项目经验；公司是国家高新技术企业、***科技型企业、广东省软件企业、 知识产权贯标企业，具有完备的管理体系。,\n",
      "\n",
      "APP负责人,3-4万/月,汽车,申科易购大数据集团有限公司,129107833,五险一金 员工旅游 弹性工作 定期体检 绩效奖金,https://jobs.51job.com/shanghai/129107833.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,上海 | 2年经验 | 大专 | 招1人\n",
      "数据开发工程师,1.5-2.5万/月,互联网/电子商务,杭州城市大数据运营有限公司,131744877,五险一金 定期体检 周末双休 带薪年假,https://jobs.51job.com/shanghai-cnq/131744877.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,上海-长宁区 | 2年经验 | 本科 | 招2人,1、参与或主导智慧城市业务及标签需求梳理，配合业务部门完成数据治理工作； 2、构建数据标签体系后的评估机制及识别率和数据质量的监控机制；3、理解业务需求，负责数据采集、清洗、存储程序以及实时数据计算的开发以及相应优化； 岗位要求：1、两年以上数据开发经验，有智慧城市、智慧园区、及互联网公司数据开发经验者更佳；2、精通Oracle、Mysql或HIVE、Hbase等数据库，熟练掌握SQL、PL/SQL、PERL、Python等脚本语言开发，参与过报表系统、数据仓库、大数据相关项目开发经验者更佳；3、熟悉Spark\\Spark-Streaming\\ElasticSearch\\FLINK\\kafka等相关大数据组件；4、具备较强的独立工作能力和问题解决能力，有良好的审美观和用户体验意识，良好的沟通能力与团队合作意识，能够承担一定工作压力；,我们是谁？CityDO集团是一家以大数据、人工智能、区块链等新兴技术为核心，“数据运营+生态合作”为主要模式的新型互联网企业。作为国内城市数据智能运营的使能者，集团从杭州起航，目前已在上海、重庆、浙江、四川、江西等地设立城市大数据运营公司。依托集团在构建数字化城市中台、城市超级信用链、行业数据透视、城市级数字孪生、智能核身技术、城市级综合支付等领域核心能力，有效归集政务、产业、民生领域数据资源，发挥数据融合价值，使政府、企业、市民共享城市数据运营的智慧成果。公司系列产品和解决方案在全国多个城市的数智政府、城市大脑、数智交通、数智文旅、数智乡村、数智社区、数智抗疫、超级菜场、绿色普惠金融等领域得到成功。实践和全面应用，获得“国家高新技术企业”、“浙江省大数据应用示范企业”和“2018-2019年新型智慧城市建设评价典型优秀案例单位”等荣誉称号和奖项，在巴塞罗那全球智慧城市展上，湖州获得全球智慧城市“政府管理与金融奖”和大中华区“信息服务与惠民奖”，这是CityDO集团参与智慧城市建设的成功实践。公司自主研发了全国首个全域在线的数字城市操作系统，其中公共数据服务管理平台作为操作系统的核心平台之一，被国家工信部评定为2020年大数据产业发展试点示范项目。CityDO将携手生态合作伙伴，发挥并扩大CityDO?生态效应，在数字中国的征程中，共同推动新时代智慧城市建设和数字经济的蓬勃发展。了解更多：公司官网：城市大数据运营有限公司公司公众号：城市大数据运营————————————————我们能给你什么？-蓝海行业准独角兽，稳定与机会共存-接触优质项目，快速成长进阶-导师制，与行业大牛、优质人才共事-周末双休，劳逸结合-全额缴纳五险一金，贴心的各类补贴-舒适优美的工作环境，便利交通-不定期节日惊喜与生日福利-暖心的零食下午茶-年度体检、补充意外险,\n",
      "\n",
      "GIS开发工程师,1-2.5万/月,计算机服务(系统、数据服务、维修),中地大数据（广东）有限公司,110269413,五险一金 员工旅游 年终奖金 弹性工作 定期体检,https://jobs.51job.com/guangzhou/110269413.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,广州 | 2年经验 | 本科 | 招2人\n",
      "APP负责人,3-4万/月,汽车,申科易购大数据集团有限公司,129107833,五险一金 员工旅游 弹性工作 定期体检 绩效奖金,https://jobs.51job.com/shanghai/129107833.html?s=sou_sou_soulb&t=0,民营公司 | 1000-5000人,上海 | 2年经验 | 大专 | 招1人,1、根据公司产品战略，负责移动端（IOS、安卓平台）产品规划、方案设计与产品周期管理，负责系统架构整体设计，确定技术架构选型，并主导功能模块设计、数据结构设计、对外接口设计，达成公司业务目标。 2、制定项目计划，监督系统开发过程，推进开发进度，确保产品质量，保证产品按计划开发及发布市场。 3、跨部门合作，与市场拓展等部门密切配合，跟踪产品上市情况，对产品上市效果负责。并根据客户及市场信息指导持续优化产品，完善产品用户体验。 4、负责核心技术问题的攻关，系统优化，协助解决项目开发过程中的技术难题。 5、完成领导交办的其他工作。,申科易购大数据集团创办于1995年2月5日，作为目前全球新能源汽车新零售集团中的龙头企业，同时也是一家多品类商务公司，经营商品涵盖汽车电子商务、新能源汽车新零售、消费电子、SAAS系统、金融服务、百货、线下实体门店200余家。 线上平台“今日买车”位居国内汽车电商头部位置，线上线下的融合发展引跑新零售发展新趋势，率先打造汽车行业内生态链闭环全交易的电子商务平台。我们不生产车，我们只是消费者的搬运工。 团队成员平均年龄26岁，核心成员全部出自百度、腾讯、苏宁易购、4A等一流互联网公司。我们的使命是“让天下没有难买的车”。今日买车通过线上汽车交易全流程的可视化、线下闭环服务和平台承诺，为更多消费者提供安全保障，让客户体验到汽车行业的“多.透.易.省”。,\n",
      "\n",
      "C++开发工程师,1-2万/月,计算机软件,北京旋极伏羲大数据技术有限公司,130665257,五险一金 交通补贴 餐饮补贴 通讯补贴 弹性工作,https://jobs.51job.com/beijing-hdq/130665257.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,北京-海淀区 | 2年经验 | 本科 | 招3人\n",
      "C++开发工程师,1-2万/月,计算机软件,北京旋极伏羲大数据技术有限公司,130665257,五险一金 交通补贴 餐饮补贴 通讯补贴 弹性工作,https://jobs.51job.com/beijing-hdq/130665257.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,北京-海淀区 | 2年经验 | 本科 | 招3人,岗位职责：1、参与用户需求调研和需求分析及与软件设计工作，并编写相关文档；2、负责项目模块的详细设计、编码调试和单元级测试工作；3、配合完成项目的单元级、配置项级和系统级测试的相关工作；4、配合完成项目的联调联试工作。任职要求：1、大学本科及以上学历，地理信息、计算机及相关专业优先；2、熟悉C++语言，有2年以上开发经验；3、熟悉Linux操作系统；4、熟悉Socket网络编程和多线程编程；5、有GIS开发经验优先；6、有过云计算、大数据处理研发经验者优先,北京旋极伏羲大数据技术有限公司（以下简称：旋极伏羲）始创于2016 年 5 月，专注于全球领先的时空大数据产品与服务提供。公司总部设在北京永丰科技企业加速器三区，在成都等地设有研发基地。旋极伏羲由北京旋极信息技术股份有限公司（股票代码：300324）控股，是旋极信息集团最重要的成员企业之一。作为时空大数据、国防大数据软件供应商和系统解决方案提供商，旋极伏羲掌握全球领先的地球空间网格技术，通过遥感、GIS、导航、计算机网络等 4 套基础网格编码，可对空、天、地、海等地球空间多域数据进行高效的组织管理和应用，为军事、测绘、导航、气象、遥感、减灾、公安等不同行业提供完整的大数据应用一体化解决方案。旋极伏羲重视技术储备，视创新为生命，目前已成功研制基于全球时空剖分的大数据应用系列软件产品——iWhere大数据网格化管理服务平台，形成以iWhereCloud、iWhere3D、iWhereStore、iWhereGA、iWhereServer、iWhereLink、iWhereSpatial、iWhereVideo、iWhereRS、iWhereE、iWherePlan等产品系列，完成了对时空大数据工具产品和服务平台等完备产品链条的构建。伴随着 2015 年国务院《关于促进大数据发展的行动纲要》的颁发，公司将一方面致力于在农业、民政、国土、环保、公安、国安、住建、交通、水利、卫生、统计、林业、地震、气象、海洋、测绘、地调、保险等领域积极开展民生大数据技术服务。另一方面，旋极伏羲已成功为军事态势、北斗专项、高分专项等国家国防重大应用提供了成熟的国防大数据系统解决方案。同时，公司创立了时空大数据技术实验室，建立产学研基地，持续引进高层次专业人才，获得多项软件著作权和技术专利，与行业企业展开紧密合作，以创造出更好的社会价值、军事价值和经济效益。“谁掌握大数据，谁就掌握了未来”。大数据产业不仅是国家竞争力的重要体现，同时正在成为时代新财富和经济增长点。旋极伏羲将牢牢把握时代机遇，恪守技术领先优势，深入挖掘数据价值，辅助国家、政府与企业的科学决策，力争成为具有国际化竞争力的大数据平台领先企业。,\n",
      "\n",
      "Java开发工程师,1-2万/月,互联网/电子商务,深圳市海豚汇大数据技术发展有限公司,129204859,五险一金 餐饮补贴 员工旅游 通讯补贴 出国机会 专业培训 绩效奖金 年终奖金,https://jobs.51job.com/shenzhen-ftq/129204859.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳-福田区 | 2年经验 | 本科 | 招若干人\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Java开发工程师,1-2万/月,互联网/电子商务,深圳市海豚汇大数据技术发展有限公司,129204859,五险一金 餐饮补贴 员工旅游 通讯补贴 出国机会 专业培训 绩效奖金 年终奖金,https://jobs.51job.com/shenzhen-ftq/129204859.html?s=sou_sou_soulb&t=0,民营公司 | 150-500人,深圳-福田区 | 2年经验 | 本科 | 招若干人,岗位职责：1、完成功能模块的需求调研、概要设计、详细设计、代码编写、单元测试、系统联调和集成测试； 2、核心代码与组件编写，共享重用代码库开发；3、解决开发中所遇到的技术难题，并能给与同事技术指导；4、学习和研究新技术以满足产品的需求，根据开发过程中的体验对产品提出改进建议。任职资格：1、本科及以上学历，计算机相关专业，具备2年及以上工作经验； 2、熟练掌握Java编程语言；3、精通J2EE体系架构，熟练掌握Mybatis、spring MVC、spring cloud等开源框架；4、精通Mysql数据库应用技术；5、精通Nginx、Redis、Memcached、RabbitMQ、Kafka等技术；6、熟悉常用的软件设计模式，并对分布式、微服务开发有项目实战经验；7、良好的沟通与组织协调能力，较强的执行力和责任感，能承受压力，思维敏捷；8、有电商平台类项目开发经验优先考虑。9、熟悉商贸流通业务，或熟悉批发零售业务优先。,深圳市海豚汇大数据技术发展有限公司（海豚汇）是专业的批零贸易平台，平台以提升商贸流通效率为己任，致力于通过大数据优化流通环节，形成以拍卖、直播、批零电商为形式的商贸流通业态。,\n",
      "\n",
      "系统开发工程师,2-5万/月,金融/投资/证券,上海皓晨投资有限公司,128504347,,https://jobs.51job.com/shanghai-cnq/128504347.html?s=sou_sou_soulb&t=0,民营公司 | 少于50人,上海-长宁区 | 1年经验 | 本科 | 招5人\n",
      "系统开发工程师,2-5万/月,金融/投资/证券,上海皓晨投资有限公司,128504347,,https://jobs.51job.com/shanghai-cnq/128504347.html?s=sou_sou_soulb&t=0,民营公司 | 少于50人,上海-长宁区 | 1年经验 | 本科 | 招5人,岗位职责：1、熟悉各二级市场交易所行情接口，完成交易系统的开发实现，梳理代码注释和开发文档；2、熟悉现有交易系统功能及规则，优化现有系统的构架性能；3、完成行情数据的落地维护，配合策略研究员完成策略实盘上线；4、参与公司或部门的专项研究课题，完成公司上级领导交办的其他工作。任职要求：1、985/211名校毕业，计算机，电子，数学、物理或其他相关理工科专业；2、熟悉C/C++编程，有相关领域工作、大数据系统开发者优先；3、熟悉Linux/Windows低延迟系统开发，多线程、高并发编程，了解CPU结构和原理（例如缓存、指令集、多核心、多线程），了解计算机网络（例如 Socket、TCP/IP、UDP）,上海皓晨投资有限公司是一家专注于股票、期货等二级市场量化交易的阳光私募基金公司，是中国基金业协会备案的私募基金管理人，及中国基金业协会会员。公司自2011年成立至今取得了卓越的投资收益。公司研发团队成员都是来自于清华、复旦、交大、中科大等国内外顶尖名校理工科相关专业的优秀人才。核心人员曾获得世界数学奥林匹克金牌，全国/美国数模竞赛一等奖，各类理科全国竞赛一、二等奖。研发团队拥有10年以上交易及管理经验。公司运用独创的金融数学模型进行计算机程序化交易，拥有一整套成熟的策略投资模型和可靠的交易系统，获得了长期稳定的投资收益。我们视风险控制为基本理念，将其贯彻到投资中的各个环节，致力于为客户带来长期、稳健、持续的投资回报。,\n",
      "\n",
      "项目总工（轨道/上海）,1.2-1.7万/月,计算机软件,上海宁日计算机软件有限公司,131886991,五险一金 绩效奖金 弹性工作 定期体检,https://jobs.51job.com/shanghai-pdxq/131886991.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-浦东新区 | 2年经验 | 本科 | 招1人\n",
      "项目总工（轨道/上海）,1.2-1.7万/月,计算机软件,上海宁日计算机软件有限公司,131886991,五险一金 绩效奖金 弹性工作 定期体检,https://jobs.51job.com/shanghai-pdxq/131886991.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-浦东新区 | 2年经验 | 本科 | 招1人,1.协助项目经理做好项目的技术管理、质量管理、内部协调、风险管理等工作；2.负责平台业务功能设计、原型设计工作，指导团队完成项目实施开发工作，并跟进项目开发进度，确保项目如期上线；3.负责项目的深化设计工作，以及与相关专业的技术协调与对接等，确保项目在实施阶段的落地性；4.协调、处理系统项目过程中业务和技术问题；任职要求：1.计算机、自动化、轨道交通相关专业，2年以上开发经验，1年以上项目管理经验；2.对大数据、云计算、信息化技术有一定了解，对主流新技术在轨道交通行业的应用和落地有相关经验；3.有良好的文档编写能力，清晰的逻辑思路，擅长使用常规流程图，时序图等形式描述需求；4.具备较强的沟通表达能力，熟练掌握业务梳理方法，能准确把握需求的核心要点5.具备较强的设计原型表现能力，熟练使用需求分析辅助工具，如Axure、Visio、Mindmanager等；6.掌握java开发语言，掌握spring开发框架，掌握oracle、mysql等关系型数据库；7.熟悉轨道交通运营生产信息化、轨道交通智能运维的优先。8.执行能力强，抗压能力强，有责任心和良好的团队合作精神，能适应不定期出差；,本公司主要从事计算机软件及系统集成、自动化工程专业领域内的技术开发、技术服务等。兼顾计算机网络工程，弱电工程，公共安全防范系统安装、维修。,\n",
      "\n",
      "风控建模专家,2-2.5万/月,金融/投资/证券,东乔科技（上海）有限责任公司,119069014,五险一金 员工旅游 年终奖金 绩效奖金 定期体检 餐饮补贴,https://jobs.51job.com/shanghai-mhq/119069014.html?s=sou_sou_soulb&t=0,民营公司 | 50-150人,上海-闵行区 | 1年经验 | 本科 | 招3人\n"
     ]
    }
   ],
   "source": [
    "#在name_list中输入你要的职位关键词，workyear中输入工作年限，cottype中输入公司x质，companysize中输入公司规模\n",
    "\n",
    "if __name__ == '__main__':\n",
    "    name_list = ['大数据']\n",
    "    user_input = name_list[0]\n",
    "    job_name = parse.quote(user_input)\n",
    "    workyear = \"1-3年\"    #在校生/应届生、1-3年、3-5年、5-10年、10年以上、无需经验\n",
    "    cottype = \"民营公司\"     # 国企、外资（欧美）、外资（非欧美）、上市公司、合资、民营公司 、外企代表处 、政府机关、事业单位、非营利组织、创业公司\n",
    "    companysize = \"请选择\" # 少于50人、50-150人、150-500人、500-1000人、1000-5000人、5000-10000人、10000人以上\n",
    "    \n",
    "    \n",
    "    with open(f\"./{user_input}.csv\", \"a+\", encoding='utf-8-sig') as fp:\n",
    "        fp.write(\"职位名称,薪水,所属类别,公司名字,职位id,职位福利,职位详情链接,公司描述,简介,职位信息,公司信息,职位要求\" + \"\\n\")\n",
    "\n",
    "    url = \"https://search.51job.com/list/010000%252c020000%252c030200%252c040000%252c180200,000000,0000,00,9,99,{job_name},2,{page}.html?lang=c&postchannel=0000&workyear={workyear}&cotype={cotype}&degreefrom=99&jobterm=99&companysize={companysize}&ord_field=0&dibiaoid=0&line=&welfare=\"\n",
    "    workyear, cottype, companysize = get_url(workyear, cottype, companysize)#参数url生成\n",
    "    total_page_num = get_page_num(url.format(job_name=job_name, page=1, workyear=workyear, cotype=cottype, companysize=companysize))\n",
    "    print(url.format(job_name=job_name, page=1, workyear=workyear, cotype=cottype, companysize=companysize))\n",
    "    \n",
    "    \n",
    "    url_list = []\n",
    "    for i in range(1,int(total_page_num)+1):\n",
    "        url_list.append(url.format(job_name=job_name, page=i, workyear=workyear, cotype=cottype, companysize=companysize))\n",
    " \n",
    "    tasks = []\n",
    "    nest_asyncio.apply()\n",
    "    for url in url_list:\n",
    "        c = get_data(url)\n",
    "        task = asyncio.ensure_future(c)\n",
    "        task.add_done_callback(callback)\n",
    "        tasks.append(task)\n",
    "    loop = asyncio.get_event_loop()\n",
    "    loop.run_until_complete(asyncio.wait(tasks))\n"
   ]
  }
 ],
 "metadata": {
  "kernelspec": {
   "display_name": "Python 3",
   "language": "python",
   "name": "python3"
  },
  "language_info": {
   "codemirror_mode": {
    "name": "ipython",
    "version": 3
   },
   "file_extension": ".py",
   "mimetype": "text/x-python",
   "name": "python",
   "nbconvert_exporter": "python",
   "pygments_lexer": "ipython3",
   "version": "3.8.3"
  },
  "toc": {
   "base_numbering": 1,
   "nav_menu": {},
   "number_sections": true,
   "sideBar": true,
   "skip_h1_title": false,
   "title_cell": "Table of Contents",
   "title_sidebar": "Contents",
   "toc_cell": false,
   "toc_position": {},
   "toc_section_display": true,
   "toc_window_display": false
  },
  "varInspector": {
   "cols": {
    "lenName": 16,
    "lenType": 16,
    "lenVar": 40
   },
   "kernels_config": {
    "python": {
     "delete_cmd_postfix": "",
     "delete_cmd_prefix": "del ",
     "library": "var_list.py",
     "varRefreshCmd": "print(var_dic_list())"
    },
    "r": {
     "delete_cmd_postfix": ") ",
     "delete_cmd_prefix": "rm(",
     "library": "var_list.r",
     "varRefreshCmd": "cat(var_dic_list()) "
    }
   },
   "types_to_exclude": [
    "module",
    "function",
    "builtin_function_or_method",
    "instance",
    "_Feature"
   ],
   "window_display": false
  }
 },
 "nbformat": 4,
 "nbformat_minor": 4
}
